Date | Title | Description |
21.05.2025 | The Future of Data Integration: A New Era of Speed and Simplicity | In the fast-paced world of data analytics, speed and simplicity are the new currencies. Companies are no longer willing to wait months for data integration solutions. They demand immediate access to live data, and two recent innovations—Inc... |
20.05.2025 | Confluent Unites Batch and Stream Processing for Faster, Smarter Agentic AI and Analytics | Confluent, Inc. the data streaming pioneer, announced new Confluent Cloud capabilities that make it easier to process and secure data for faster insights and decision-making. Snapshot queries, new in Confluent Cloud for Apache Flink, bring ... |
03.05.2025 | Navigating the Data Landscape: Choosing Between Data Analyst and Data Scientist in 2025 | In the digital age, data is the new oil. It fuels decisions, drives innovations, and shapes futures. As we step into 2025, two prominent roles emerge in this data-driven world: Data Analysts and Data Scientists. Each path offers unique oppo... |
28.04.2025 | Tencent Cloud Big Data-WeData: An Integrated Data + AI Intelligent Platform | Introduction: An Integrated Solution to Address Challenges in Digital Transformation
SHENZHEN, China, April 28, 2025 /PRNewswire/ -- In the era where LLM driven intelligence prevails, enterprise data platforms face emerging challenges from ... |
22.04.2025 | Batch data processing is too slow for real-time AI: How open-source Apache Airflow 3.0 solves the challenge with event-driven data orchestration | Join our daily and weekly newsletters for the latest updates and exclusive content on industry-leading AI coverage. Learn More
Moving data from diverse sources to the right location for AI use is a challenging task. That’s where data orches... |
31.01.2025 | Securing the Cloud: Best Practices for CI/CD in Modern Development | In the world of cloud development, security is not just an option; it’s a necessity. As teams grow and codebases expand, the complexity of maintaining security increases. This article dives into the essentials of securing Continuous Integra... |
30.01.2025 | Apache Flink: использование и автоматическая проверка собственного сериализатора состояния | Привет, Хабр! На связи Александр Бобряков, техлид команды МТС Аналитики. Это мой финальный пост про Apache Flink. В предыдущих частях мы рассматривали процессы сериализации данных, написали кастомный сериализатор, а также покрыли его тестам... |
15.01.2025 | Navigating the Data Stream: The Power of Apache Flink and Kyuubi | In the vast ocean of big data, tools like Apache Flink and Kyuubi serve as lifeboats, guiding users through turbulent waters. They offer streamlined solutions for data processing and SQL query execution, making them indispensable in modern ... |
14.01.2025 | Apache Kyuubi + Spark: как приручить большие данные | Привет, Хабр! Меня зовут Станислав Габдулгазиев, и я архитектор департамента поддержки продаж Arenadata. В этом материале поделюсь впечатлениями от использования Kyuubi — инструмента, который значительно упрощает работу пользователей с SQL,... |
14.01.2025 | Apache Flink: тестирование собственного сериализатора состояния | Привет, Хабр! На связи Александр Бобряков, техлид команды МТС Аналитика. Это мой одиннадцатый пост про Apache Flink. В предыдущей части мы рассмотрели сериализацию данных во Flink, написали сериализатор, поддерживающий эволюцию схемы для Fl... |
19.12.2024 | Confluent's New Platform: A Game Changer for Real-Time Data Processing | In the fast-paced world of data, real-time processing is the lifeblood of modern enterprises. Confluent has stepped into the spotlight with its latest offering: the Confluent Platform for Apache Flink. This platform is not just an upgrade; ... |
19.12.2024 | Confluent unveils advanced platform for Apache Flink | Confluent has announced the general availability of its Confluent Platform for Apache Flink, featuring enhanced security and facility for managing on-premises applications.
The platform is designed to offer enterprise-level security capabil... |
08.12.2024 | Мобильная разработка за неделю #567 (2 — 8 декабря) | В новом дайджесте уменьшение размера банковского приложения и транзишинометр для Android, вопперы и табы, сертификаты и профили, сколько приложений, из выпущенных в 2024 году, стали успешными, вранье LLM и многое другое. Подключайтесь!
Подп... |
04.12.2024 | Apache Flink: Flink Table API & SQL, часть 2 | Table API — это API для взаимодействия с данными в табличном виде. Если рассматривать аналогию со Spark, то наша таблица в Table API — это датафреймы в Spark. Нет четкой структуры, каждая точка потока — таблица, то есть после преобразования... |
03.12.2024 | Apache Flink: Flink Table API & SQL, часть 1 | Привет! Меня зовут Александр Булатов, я старший инженер данных в Блоке Данных билайна. В этой серии статей я расскажу, как выглядит создание Source и Sink для Table API & SQL и как Table API взаимодействует с DataStream API.
Я работаю н... |
13.11.2024 | The Art of Streaming: A Journey into Birdwatching and Technology | In the heart of nature, a simple bird feeder becomes a stage. The audience? Anyone with an internet connection. This is the story of how a passion for birdwatching transformed into a live-streaming spectacle, blending technology with the be... |
07.11.2024 | Apache Flink: Сериализация и JacksonStateSerializer | Привет, Хабр! На связи Александр Бобряков, техлид в команде МТС Аналитики. Это мой десятый материал про Apache Flink. В предыдущей части мы закончили разбирать оператор с Flink-таймерами, использующими внутреннее состояние. Также я показал,... |
24.10.2024 | Apache Flink: Unit и E2E-тестирование оператора с таймерами в Apache Flink | Привет, Хабр! На связи Александр Бобряков, техлид в команде МТС Аналитики. В предыдущей части я рассказал про создание Flink-джобы Kafka-to-Kafka с оператором на основе встроенных таймеров. Такой пайплайн позволяет создавать вызов через опр... |
28.09.2024 | The Rise of Streaming Frameworks: Unpacking Apache Flink | In the digital age, speed is king. Users demand instant gratification. A few seconds of delay can feel like an eternity. This urgency drives the need for systems that can process vast amounts of data in real time. Enter streaming frameworks... |
25.09.2024 | Стриминговые фреймворки: Apache Flink | Требования к современным системам в части скорости обработки информации растут. Пользователи уже не хотят ждать загрузки поста в социальной сети или фильма в онлайн-кинотеатре дольше нескольких секунд. Поэтому перед разработчиками высоконаг... |
18.09.2024 | DeltaStream: Serverless Stream Processing Company Secures $15 Million (Series A) | Serverless stream processing platform DeltaStream announced it had raised $15 million in Series A funding from New Enterprise Associates (NEA), Galaxy Interactive, and Sanabil Investments. This funding will accelerate the company’s vision o... |
13.09.2024 | Как мы генерируем GPT-нейросетями миллиарды объявлений на малом количестве GPU. Доклад Яндекса | Привет! Меня зовут Ольга Зайкова, в Яндексе я руковожу группой автоматической генерации рекламы. Сегодня расскажу о соединении тяжёлых процессингов и GPU‑вычислений. Обсудим, как мы реализовали высоконагруженный процессинг, который обрабаты... |
11.09.2024 | Oracle unveils Intelligent Data Lake to boost data management | Oracle has announced its plans to introduce Oracle Intelligent Data Lake as a new feature of the Oracle Data Intelligence Platform. This addition aims to simplify the use of data from diverse sources through a unified experience, incorporat... |
10.09.2024 | The Future of Data and AI: Oracle's Intelligent Data Lake and Mobilint's AI Chips | In the fast-paced world of technology, data is the new oil. It fuels decisions, drives innovation, and shapes the future. Two recent announcements from Oracle and Mobilint highlight this truth, showcasing advancements that promise to reshap... |
10.09.2024 | The Data Revolution: Oracle and GrooperAI Lead the Charge in Intelligent Automation | In the fast-paced world of technology, data is the new oil. Companies are digging deep to extract value from their data reservoirs. Two recent announcements highlight this trend: Oracle's Intelligent Data Lake and GrooperAI's advancements i... |
10.09.2024 | Navigating the Data Stream: Building an Event Processing System from Scratch | In the age of Big Data, the ability to process and analyze vast streams of information is crucial. Companies are inundated with data from various sources, and the challenge lies in transforming this data into actionable insights. This artic... |
10.09.2024 | Oracle Introduces Intelligent Data Lake and Generative AI-Powered Analytics for Oracle Data Intelligence Platform | Oracle Intelligent Data Lake will include open data formats, a unified catalog, and modern developer experiences for building rich data intelligence solutions
Oracle CloudWorld — Oracle today announced its plans to deliver Oracle Intelligen... |
10.09.2024 | Как с нуля построить систему обработки событий | Сегодня Александр Шувалов и Юлиян Латыпов поделятся с вами опытом создания системы обработки событий в потоке данных для обогащения информации и выявления аномалий.
Если вы ранее не были знакомы с приведенными ниже терминами, рекомендуем пр... |
31.08.2024 | Streaming 101 (Основы потоковой обработки) | Три женщины бредут по ручью, собирая пиявок. (источник: Wellcome Library, London)
Обработка потоковых данных стала крайне важна в настоящее время. И на это есть веские причины, такие как:
Компании жаждут получать данный как можно быстрее, и... |
21.06.2024 | Как эволюционировала платформа управления данными в Яндекс Go. Доклад Яндекса | С 2017 года мы строим и постоянно адаптируем к меняющимся требованиям и внешним факторам платформу управления данными. Для нас это инфраструктура, которая живёт и переиспользуется внутри разных сервисов, которые входят в Яндекс Go: Такси, Е... |
02.05.2024 | Confluent’s expands managed Apache Flink service to simplify data streaming for generative AI
AI Model Inference
Auto-scaling for lower-latency workloads
Your vote of support is important to us and it... | Confluent Inc. today announced expanded capabilities for its managed service for Apache Flink, the open-source big data processing framework.
Unlike the regular open-source Flink, it comes with a novel AI Model Inference feature that organi... |
19.04.2024 | Confluent announces Accelerate with Confluent | Confluent, Inc. (NASDAQ:CFLT), the data streaming pioneer, today announced Accelerate with Confluent, a program for systems integrators (SIs) that prioritizes excellence in Confluent Professional Services to empower partners to deliver comp... |
12.01.2024 | Как работает дедупликация данных в потоке Kafka-to-Kafka? | Всем привет, меня зовут Александр Бобряков. Я техлид в команде МТС Аналитики, занимаюсь Real-Time обработкой данных. Мы начали использовать фреймворк Apache Flink, и я решил поделиться на Хабре своим опытом внедрения этой технологии в цикле... |
28.12.2023 | Построение архитектур для обработки данных в режиме реального времени при помощи Apache Kafka, Flink и Druid | Командам, которые занимаются обработкой данных (поступающих пакетными партиями в рабочих потоках) сложно соответствовать современным требованиям по обработке данных в режиме реального времени. Почему? Потому что пакетный поток данных – от д... |
23.11.2023 | Как использовать Spring в качестве фреймворка для Flink-приложений | Всем привет, меня зовут Александр Бобряков. Я техлид в команде МТС Аналитики, занимаюсь Real-Time обработкой данных. Недавно мы начали использовать фреймворк Apache Flink, и я решил поделиться на Хабре своим опытом внедрения этой технологии... |
08.02.2023 | Aiven launches managed version of Apache Flink for real-time data stream processing
Show your support for our mission by joining our Cube Club and Cube Event Community of experts. Join the community ... | Aiven Ltd., a startup that’s focused on delivering cloud-hosted and managed versions of the most popular open-source software platforms, has announced the general availability of its latest offering, Aiven for Apache Flink.
With the new off... |
18.01.2023 | Decodable wants to take real-time stream processing mainstream | Decodable, the well-funded real-time data engineering and stream processing platform based, in part, on the Apache Flink open source project, is launching a major update today that aims to make the service more attractive to large enterpris... |
06.01.2023 | Confluent expands Kafka Streams capabilities, acquires Apache Flink vendor | Check out all the on-demand sessions from the Intelligent Security Summit here.
The ability to move, manage and process data in real time is the domain of data streaming, which is largely dominated by a series of open-source technologies.
T... |
03.10.2022 | Immerok raises $17M to build out its serverless Apache Flink real-time data processing platform
Show your support for our mission by joining our Cube Club and Cube Event Community of experts. Join th... | Serverless Apache Flink startup Immerok GmbH is hoping to make real-time data stream processing a reality for more companies today after closing on a $17 million seed funding round.
Today’s round was led by CUSP Capital, 468 Capital, Cortic... |
24.08.2022 | Decodable and DataStax partnership: What does it mean for enterprises? | To further strengthen our commitment to providing industry-leading coverage of data technology, VentureBeat is excited to welcome Andrew Brust and Tony Baer as regular contributors. Watch for their articles in the Data Pipeline.
Decodable a... |
07.04.2022 | StreamNative releases report with insights into data streaming ecosystem | We are excited to bring Transform 2022 back in-person July 19 and virtually July 20 - 28. Join AI and data leaders for insightful talks and exciting networking opportunities. Register today!
The appeal of processing data in real-time is on ... |
17.02.2022 | How Netflix built its real-time data infrastructure | Join today's leading executives online at the Data Summit on March 9th. Register here.
What makes Netflix, Netflix? Creating compelling original programming, analyzing its user data to serve subscribers better, and letting people consume co... |
17.02.2022 | How Netflix built its real-time data infrastructure | We are excited to bring Transform 2022 back in-person July 19 and virtually July 20 - 28. Join AI and data leaders for insightful talks and exciting networking opportunities. Register today!
What makes Netflix, Netflix? Creating compelling ... |
27.12.2021 | Ситимобил вместе с экспертами из разных компаний подводит итоги года в разных областях Data Science | Всем привет!
Подходящий к концу 2021 год был очень насыщенным — нам удалось провести 5 митапов с интересными спикерами и экспертами рынка Data Science и Machine Learning. Мы узнали много интересного, и это здорово!
Каждый год выходят сотни ... |
03.12.2021 | Aiven extends managed open source service to Apache Flink | Hear from CIOs, CTOs, and other C-level and senior execs on data and AI strategies at the Future of Work Summit this January 12, 2022. Learn more
Let the OSS Enterprise newsletter guide your open source journey! Sign up here.
Aiven, the fre... |
03.12.2021 | Aiven extends managed open source service to Apache Flink | We are excited to bring Transform 2022 back in-person July 19 and virtually July 20 - 28. Join AI and data leaders for insightful talks and exciting networking opportunities. Register today!
Let the OSS Enterprise newsletter guide your open... |
26.10.2021 | Apache Hive: от модели распределённых вычислений MapReduce компании Google до Big Data – хранилища больших данных | Обзор
Apache Hive – система управления (СУБД) реляционными базами данных (РБД) с открытым исходным кодом для запросов, агрегирования и анализа параметров и режимов рабочих нагрузок с большими данными. В этой статье описываются ключевые инно... |
01.10.2021 | Lightbend Cloudflow. Разработка конвейеров потоковой обработки данных | В этой статье мы познакомимся с подходом к разработке конвейеров потоковой обработки данных (от англ. Streaming Data Pipelines) с помощью фреймворка Lightbend Cloudflow:
рассмотрим фреймворк с точки зрения общей концепции и разработки;
обра... |
23.08.2021 | Apache Flink и потоковая обработка данных для решения задач IoT | К 2021 году прогнозируется, что около 16 млрд из приблизительно 28 млрд подключенных устройств по всему миру, будут так или иначе связаны в рамках концепции интернета вещей. Интернет уходит в вещность, и надо как-то справляться с растущим п... |
06.08.2021 | Data warehousing has problems. Is a data mesh the solution?
Mesh mania
Transfer of ownership
Cultural barriers
Product thinking
Domain control
Who’ll do the work?
Assembling the pieces
Show yo... | Since its founding 13 years ago as an online shoe seller, Zalando SE has grown to become one of the largest e-commerce fashion retailers in Europe. Given its roots on the web, it’s not surprising that about 15% of the firm’s 14,000 employee... |
23.07.2021 | Latest big data developments in the realm of data lakehouse | We are excited to bring Transform 2022 back in-person July 19 and virtually July 20 - 28. Join AI and data leaders for insightful talks and exciting networking opportunities. Register today!
I recently wrote a post about the concept of the ... |
23.07.2021 | Latest big data developments in the realm of data lakehouse | All the sessions from Transform 2021 are available on-demand now. Watch now.
I recently wrote a post about the concept of the data lakehouse, which in some ways, brings components of what I outlined in the my rant about databases and what I... |
11.09.2017 | Data Artisans announces commercial Application Manager for open source Apache Flink | Data Artisans, the business arm of open source tool, Apache Flink, announced an early-access release of the commercial version of their platform today that includes a new tool for managing streaming applications.
Kostas Tzoumas, CEO at Data... |
31.10.2016 | 10 Popular Big Data Software and Tools We Found for you. | Share
Tweet
Share
Share
Email
Data processing is a do-or-die requirement for businesses today. There are many Big Data software out there. Many of them promise to save you money, time and help you find never-before-seen insights. Although t... |
12.06.2016 | Spark fragmentation undermines community | Vinod Iyengar Contributor
Vinod Iyengar is the director of product marketing at open source machine learning company H2O.ai.
More posts by this contributor
Spark fragmentation undermines community
The Hadoop distribution war comes down to a... |
15.10.2015 | The Challenges Of Building AI Apps | Mike Chalfen Contributor
Mike Chalfen is a co-founder and partner at Mosaic Ventures.
Artificial intelligence (AI) has an intellectual lineage stretching back to the greats of computer theory: Turing and, ultimately, Babbage, inventor of th... |