| Date | Title | Description |
| 16.09.2024 | Интеграционное тестирование: виды, примеры и инструменты | Интеграционное тестирование нередко вспоминают на собеседованиях, когда спрашивают о видах и уровнях тестирования. И, как любую теорию, его сложно понять в отрыве от практики. В этой статье разбираем тестирование интеграций на конкретных пр... |
| 13.09.2024 | Redpanda Adds AI and Cloud to Redpanda Connect; Reveals Vision for R1 Multimodal Streaming Engine | Expanded AI connectivity with Cloud availability, new Apache Iceberg Topics, and Redpanda R1 Engine paves the path to simplify building data-intensive applications for AI and analytics
Related Posts
CPG Radar Launches AI-driven Platform to ... |
| 12.09.2024 | Собеседуем компании правильно | Каждый айтишник знает как важно на собеседовании ответить на заданные интервьюером вопросы. Но почему-то не все понимают важность того, какие вопросы задает кандидат представителям компании. А это между прочим хороший шанс в конце собеседов... |
| 11.09.2024 | The Mockingbird Solution: Streamlining Integration Testing in Banking | In the world of software development, integration testing is the bridge that connects various systems. It’s where the rubber meets the road. For banks, this is crucial. With products like auto loans, mortgages, and consumer credit, the stak... |
| 11.09.2024 | “Selvakumar Venkatasubbu: Celebrating IEEE Senior Member Elevation and Cloud Engineering Excellence” | Share
Tweet
Share
Share
Email
“Cloud technology is not just about infrastructure and scalability, it about enabling innovation that revolutionizes industries. My passion is to create solutions that not only meet today’s demands but also set... |
| 11.09.2024 | Mockingbird, или Как убить всех зайцев одним выстрелом | Привет! Меня зовут Ольга Инеева, я ведущий инженер по обеспечению качества в Т-Банке. Расскажу о проблемах тестирования интеграции и об инструменте для мокирования Mockingbird. Мы решили проблему сложных связанных сценариев и хотим поделить... |
| 10.09.2024 | The Future of Data and AI: Oracle's Intelligent Data Lake and Mobilint's AI Chips | In the fast-paced world of technology, data is the new oil. It fuels decisions, drives innovation, and shapes the future. Two recent announcements from Oracle and Mobilint highlight this truth, showcasing advancements that promise to reshap... |
| 10.09.2024 | The Data Revolution: Oracle and GrooperAI Lead the Charge in Intelligent Automation | In the fast-paced world of technology, data is the new oil. Companies are digging deep to extract value from their data reservoirs. Two recent announcements highlight this trend: Oracle's Intelligent Data Lake and GrooperAI's advancements i... |
| 10.09.2024 | Navigating the Data Stream: Building an Event Processing System from Scratch | In the age of Big Data, the ability to process and analyze vast streams of information is crucial. Companies are inundated with data from various sources, and the challenge lies in transforming this data into actionable insights. This artic... |
| 10.09.2024 | Oracle Introduces Intelligent Data Lake and Generative AI-Powered Analytics for Oracle Data Intelligence Platform | Oracle Intelligent Data Lake will include open data formats, a unified catalog, and modern developer experiences for building rich data intelligence solutions
Oracle CloudWorld — Oracle today announced its plans to deliver Oracle Intelligen... |
| 10.09.2024 | Как с нуля построить систему обработки событий | Сегодня Александр Шувалов и Юлиян Латыпов поделятся с вами опытом создания системы обработки событий в потоке данных для обогащения информации и выявления аномалий.
Если вы ранее не были знакомы с приведенными ниже терминами, рекомендуем пр... |
| 10.09.2024 | AXONI UNVEILS HYDRA™ - A NEW ERA FOR REAL-TIME DATA REPLICATION IN CAPITAL MARKETS | NEW YORK, Sept. 10, 2024 /PRNewswire/ -- Axoni, a leading provider of trade workflow applications and real-time data replication technology, today announced the rebranding of its flagship data platform, AxCore, to "HYDRA." This re... |
| 09.09.2024 | Navigating the Waters of Microservices with NodeJS and NestJS | In the world of software development, microservices are like ships sailing through a vast ocean. Each ship, or microservice, has its own purpose, yet they must work together to create a seamless journey for users. This article explores the ... |
| 05.09.2024 | Kafka для самых маленьких разработчиков, аналитиков и тестировщиков | Несколько лет назад произошел Kafka-хайп. Kafka хотели использовать все, не всегда понимая, для чего конкретно она им нужна. И сегодня многие продолжают брать Kafka в свои проекты, зачастую ожидая, что её применение само по себе сделает всё... |
| 05.09.2024 | Проектирование микросервисной архитектуры в среде NodeJS/NestJS | Microservice Architecture Design in a NodeJS/NestJS Environment | Online Retail SystemПроектирование микросервисной архитектуры в среде NodeJS/NestJS
Сценарий: Перед вами стоит задача разработать микросервисную архитектуру для системы онлай... |
| 03.09.2024 | Наш опыт интеграции с Диадок — архитектура исходящего процесса | Введение
Привет, Хабр! Разработчик из АльфаСтрахования снова на связи. Наша скрам команда занимается автоматизацией бизнес-процессов Операционного блока. В основном это разработка приложений, связанных с документооборотом внутри компании. П... |
| 02.09.2024 | Единое хранилище рейсов | Преамбула
В исполнение NDA, для кого был проект, не скажу - то ли авиапредприятие, то ли авиакомпания (российская). Проект в разработку не пошел, ограничились концепцией, предварительным анализом и архитектурой.
Мне показалось забавным выре... |
| 01.09.2024 | The Marathon Mindset: How Tech Professionals Are Running Towards Their Goals | In the world of technology, problem-solving is second nature. Software developers, engineers, and IT professionals are trained to dissect complex issues, strategize solutions, and execute plans with precision. This mindset transcends the of... |
| 01.09.2024 | The Art of TSQL Triggers in Python: A New Era of Data Handling | In the world of data management, triggers are like silent sentinels. They watch over databases, responding to changes with precision. Recently, a new approach has emerged: implementing TSQL triggers using Python. This method combines the ro... |
| 31.08.2024 | Streaming 101 (Основы потоковой обработки) | Три женщины бредут по ручью, собирая пиявок. (источник: Wellcome Library, London)
Обработка потоковых данных стала крайне важна в настоящее время. И на это есть веские причины, такие как:
Компании жаждут получать данный как можно быстрее, и... |
| 30.08.2024 | Camunda и Kafka: не откусывай больше, чем можешь проглотить | Привет, Хабр! Меня зовут Егор, я бэкенд-разработчик в T-Банке, участвую в разработке продуктов комплаенса. Недавно в одном из наших проектов мы столкнулись с проблемой низкой производительности Camunda — и хотим поделиться опытом, который м... |
| 28.08.2024 | Реализация Триггеров TSQL на Python | В прошлой статье я рассказал про общую структуру проекта, про работу Kafka с CDC для получения данных из базы. Теперь пришло время поговорить про саму реализацию триггеров на Python. Как говорилось в предыдущей статье, мы будем реализовыват... |
| 24.08.2024 | Navigating the Kubernetes Security Landscape: A Pentester's Perspective | Kubernetes has become the backbone of modern application deployment. Its container orchestration capabilities are unmatched. But with great power comes great responsibility. Security is paramount. As Kubernetes environments grow, so do the ... |
| 22.08.2024 | The Power of "Grok" Series: Simplifying Complex Concepts in Tech | In the vast ocean of technology literature, the "Grok" series from Piter Publishing stands out like a lighthouse. It illuminates the often murky waters of complex subjects such as algorithms, machine learning, and programming. Wit... |
| 22.08.2024 | Camunda 8. Почему не стоит использовать Connectors Bundle | Действительно, Camunda 8 является универсальным инструментом, и его главное преимущество заключается в возможности создания собственных сервисных задач и клиентов на любом языке программирования через GRPC. При работе с Camunda Platform нам... |
| 22.08.2024 | Не базовые навыки. Как расширить свои возможности и найти новые подходы в работе | Привет, Хабр! Меня зовут Татьяна Ошуркова, я системный аналитик, разработчик и за время опыта своей работы успела не только попробовать себя в разных ролях, но также изучить и применить на практике множество навыков из различных сфер.
В это... |
| 21.08.2024 | The Future of Auditing: Automation and Integration in the Digital Age | In the world of finance, auditing is the lighthouse guiding ships through foggy waters. It ensures that organizations navigate safely, adhering to regulations and maintaining transparency. But as technology advances, the traditional methods... |
| 21.08.2024 | Под капотом облаков. Строим облачную консоль. Часть 1. Знакомство | С чем предстоит иметь дело
Прежде чем перейти к главному, кратко обозначу, что конкретно мы в этой статье будем разбирать. Ведь область облачных вычислений настолько велика, что рассказать про все нюансы облаков вряд ли получится. И во мног... |
| 21.08.2024 | Серия книг “Грокаем” от издательства “Питер” | Привет, Хаброжители!
Сегодня вышла новая книга “Грокаем алгоритмы. 2-е издание”, в связи с чем мы решили рассказать о всей серии “Грокаем”.
А заодно подарить скидку!
Чем хороши “Грокаем”? Каждая книга яркая и оставляющая след. Важная особен... |
| 20.08.2024 | Building a Telegram Bot for Your Online Store: A Step-by-Step Guide | Creating a Telegram bot for an online store is like crafting a digital storefront. It’s an opportunity to engage customers, showcase products, and streamline the shopping experience. This guide will walk you through the process, from settin... |
| 19.08.2024 | Инфраструктура для data engineer Kafka | В этой статье я хочу показать как можно использовать Kafka в дата-инженерии и как её "пощупать".
Я не хотел бы повторяться по важным моментам, которые касаются архитектуры Kafka, поэтому рекомендую ознакомиться с данным видео.
В н... |
| 19.08.2024 | Просто выберите Postgres | Отчасти это действенный совет, отчасти — вопрос к читателям.
Совет: при создании нового приложения, требующего постоянного хранения данных, как это и бывает в случае большинства веб-приложений, по умолчанию следует выбирать Postgres.Почему ... |
| 17.08.2024 | Founders’ Mondays: A New Era for Entrepreneurs in Novosibirsk | In the heart of Novosibirsk, a new wave of entrepreneurial spirit is rising. Founders’ Mondays is not just a meeting; it’s a movement. Picture a vibrant gathering of innovators, dreamers, and doers, all under one roof, sharing ideas like se... |
| 16.08.2024 | Архитектура на основе событий в Rust | Привет, Хабр!
Сегодня мы рассмотрим, как реализовать так называемую event-driven архитектуру с использованием Rust.
Архитектура на основе событий (event-driven architecture, EDA) — это подход к созданию систем, где взаимодействие между комп... |
| 15.08.2024 | Как мы создали приложение для ТСД на Flutter с интеграцией 1С и внедрили его на 200 фабриках в Китае | Всем привет! Меня зовут Денис Гладкий, я руководитель отдела мобильной разработки компании ZENDEN Group. В этой статье я хочу поделиться нашим опытом создания приложения для терминала сбора данных (ТСД) на Flutter с интеграцией 1С, которое ... |
| 14.08.2024 | Инженер внедрения в IT: кто такой и что должен уметь | Всем привет! Меня зовут Егор Сизов, я руковожу группой инженеров внедрения по направлению Управление качеством в ГК «Цифра». Я прошел путь инженера внедрения от стажера до тимлида и теперь готов поделиться опытом, рассказать о специфике рол... |
| 14.08.2024 | Переезжаем с Oracle на Platform V Pangolin в промышленной эксплуатации | Привет, Хабр! Меня зовут Семен Попов, я отвечаю за разработку хранилища клиентских данных в Сбере. Расскажу, как мы в эксплуатации перешли с одной базы данных на другую — а именно, с Oracle на Platform V Pangolin, разработку СберТеха на осн... |
| 13.08.2024 | Data-Driven Solutions: The New Frontier for Business Growth | In the fast-paced world of business, data is the new oil. Companies that harness its power can drive growth, enhance efficiency, and outpace competitors. Recently, MWS launched a suite of data services in collaboration with Arenadata, aimed... |
| 09.08.2024 | Микросервисы на Go: Как заставить систему работать на тебя | Когда-то мне пришлось перелопатить сотни статей, пролистать горы книг и выпить не одну чашку кофе, чтобы разобраться в микросервисной архитектуре. Я искал ответы на вопросы, которые появлялись на каждом шагу: как заставить микросервисы рабо... |
| 08.08.2024 | MWS запустил новые сервисы для работы с данными на продуктах от Arenadata | Информация о продажах, клиентах, сезонном спросе, производственных процессах — все это может стать мощнейшим бустером для роста компании, если уметь оперативно анализировать большие объемы данных и принимать решения, основанные на данных.
Ч... |
| 07.08.2024 | Установка Sentry в Kubernetes, отловы exception на бекенде, в браузере, на Android | Привет, Хабр!
Меня зовут Антон Пацев, я DevOps-инженер мобильного приложения «Магнит акции и скидки». В этой статье поговорим о Sentry — инструменте для сбора exception, который помогает разработчикам быстро обнаруживать и устранять проблем... |
| 07.08.2024 | Cloudian and Supermicro Come Together to Enhance AI Infrastructure | Collaboration combines Cloudian HyperStore AI data lake software and Supermicro hardware to deploy hyperscale infrastructure
Cloudian, the leader in secure S3-compatible AI data lake platforms, and Supermicro , the leader in Total IT Soluti... |
| 03.08.2024 | Релиз Apache Kafka 3.8 | В конце июля 2024 года, согласно текущему плану развития проекта, состоялся релиз универсального и мощного инструмента для построения конвейеров данных в реальном времени и event-driven приложений Apache Kafka 3.8 с поддержкой JBOD в многоу... |
| 02.08.2024 | The Rise of GenAI: Transforming Startups and Industries in India | In the bustling world of technology, a new wave is crashing ashore. Generative AI, or GenAI, is not just a buzzword; it’s a force reshaping the landscape of startups and industries. The recent Tech Horizon event in Delhi, organized by Inc42... |
| 02.08.2024 | История оптимизации Python сервиса: пара простых системных улучшений | Привет, Хабр! В двух предыдущих статьях здесь и тут мы рассказывали историю создания одного из компонентов платформы экспериментов в компании Okko — сервиса сплитования трафика. В тех статьях говорилось о множестве изменений и улучшений, ко... |
| 01.08.2024 | Google Cloud announces new data innovations to support AI applications
Google’s Data Cloud brings more AI and data capabilities to customers
Your vote of support is important to us and it helps us kee... | Google LLC’s cloud division is rolling out new database and data cloud innovations to support customers building and scaling artificial intelligence applications to ensure that they are grounded in accurate and relevant enterprise informati... |
| 31.07.2024 | Mage Data™ Recognized as a Champion in Test Data Management by Bloor | Mage Data™ has been named a Champion in the Test Data Management (TDM) Market Update report by the independent research and analyst firm, Bloor Reserach. This recognition places Mage Data™ among the top solutions in the TDM market, standing... |
| 30.07.2024 | The Power of Docker, Kafka, and Reactive Programming in Modern Application Development | In the fast-paced world of software development, efficiency and scalability are paramount. Developers are constantly seeking tools that streamline processes and enhance performance. Enter Docker, Kafka, and reactive programming. These techn... |
| 29.07.2024 | Создание масштабируемых приложений при помощи Kafka и реактивного программирования | Введение
В современном цифровом мире критически важна возможность обрабатывать данные в режиме реального времени и масштабировать приложения. Для этого хорошо подходит Kafka – платформа для распределённой потоковой обработки событий, особен... |
| 29.07.2024 | Как мы управляем секретами в Банки.ру: Vault HashiCorp и мечта об одной безопасной кнопке | Привет! Меня зовут Лев, я руководитель интеграционной разработки в финансовом маркетплейсе Банки.ру. Больше года назад мы начали переход на микросервисную архитектуру. Секретов становилось всё больше: пароли, токены, сертификаты, ключи. А у... |
| 27.07.2024 | The Rise of Cozystack and OpenIG: Bridging the Gap in Modern Software Architecture | In the fast-paced world of technology, platforms evolve like seasons. They bring new features, fix bugs, and adapt to user needs. Two recent developments stand out: Cozystack 0.10.0 and the integration of OpenIG with message brokers. Both a... |
| 26.07.2024 | Chainguard's $140 Million Surge: A Fortress for Open Source Security | In the fast-paced world of technology, security is paramount. Chainguard, a rising star in the cybersecurity landscape, has just raised $140 million in a Series C funding round. This infusion of capital catapults the company’s valuation to ... |
| 25.07.2024 | Chainguard nabs $140M to secure enterprise applications’ open-source components
Your vote of support is important to us and it helps us keep the content FREE.
One click below supports our mission to p... | Less than a year after closing its last funding round, Chainguard Inc. today disclosed that it has raised another $140 million to support its sales growth.
Redpoint Ventures, Lightspeed Venture Partners and IVP jointly led the investment. T... |
| 25.07.2024 | Интеграция REST и MQ брокеров сообщений через шлюз OpenIG | Для чего это нужно
Конвертация сообщений между брокером и REST упрощает прием и отправку сообщений без использования нативных протоколов или клиентский приложений брокеров сообщений:
Возможные варианты использования:
Асинхронное взаимодейст... |
| 24.07.2024 | Вышел релиз свободной платформы Cozystack 0.10.0: MongoDB, NATS в базовой конфигурации и другие обновления | Мы зарелизили Cozystack 0.10.0 с новыми фичами, исправлениями и улучшениями. Самая главные и крутые новости — теперь в Cozystack есть MongoDB (через свободный аналог FerretDB) и NATS в базовой конфигурации.
Пользовательский интерфейс нового... |
| 15.07.2024 | Как Notion проектировал свой data lake, чтобы успевать за быстрым ростом | За последние три года размер данных Notion увеличился в 10 раз из‑за роста количества пользователей и объёмов контента, с которым они работают. Удвоение этого показателя происходило каждые 6–12 месяцев. Нам нужно было справиться со стремите... |
| 10.07.2024 | Nifi — когда record-oriented не оправдывает себя | Добрый день. Меня зовут Иван Клименко, и я архитектор департамента поддержки продаж компании Arenadata. В основном занимаюсь продуктом Arenadata Streaming (ADS) — это масштабируемая отказоустойчивая система для потоковой обработки данных в ... |
| 08.07.2024 | Тестирование телеметрии в каршеринге или как мы внедряли эмулятор | Привет! Меня зовут Евгений Титов, и я занимаюсь разработкой сервисов телеметрии в каршеринг-сервисе Ситидрайв. В этой статье расскажу о том, что из себя представляет телеметрия в каршеринге, какие сложности возникают при её тестировании, и ... |
| 08.07.2024 | Как стать Java-разработчиком бесплатно? Программа обучения с нуля | Если вбить «как стать java разработчиком» в поисковую строку, можно найти тысячу курсов по данному направлению. Проблема в том, что все курсы являются платными и, как правило, стоят несколько десятков, если не сотен тысяч рублей.
Чтобы разб... |
| 04.07.2024 | Как мы запустили ДБО за 6 месяцев и продвинули банковское обслуживание на новый уровень | Привет, Хабр! Меня зовут Александр, я архитектор платформы в ОТП Банке. В этой статье расскажу, как мы с командой переходили с коробочного решения дистанционного банковского обслуживания и сделали это за рекордные 6 месяцев: с чего начинали... |
| 02.07.2024 | Присматриваемся к Kafka tiered storage — 2 | Добрый день, уважаемые ИТ-ники. На связи Михаил Голованов. Продолжаем увлекательные эксперименты с tiered storage в Apache Kafka. Первая часть «Присматриваемся к Kafka tiered storage». Во второй части статьи починим, что не смогли починить ... |
| 02.07.2024 | Смена профессии в 33: стать разработчиком за 2 года | Привет! Хочу поделиться своим опытом становления Java разработчиком.
Немного об авторе: на момент написания статьи мне 36 лет, в ИТ-сфере — с 2009 года и начинал я с системного администрирования продуктов Microsoft(сервера, БД, приложения) ... |
| 01.07.2024 | Микросервисы в представлении среднего разработчика, и как всё на самом деле | Периодически общаемся с разработчиками о микросервисах, монолитах и прочих мифических существах. Порой такая эзотерика живёт в головах у людей и слышишь порой такое, что ёжики в тумане нервно курят в сторонке.
Я, когда спросил разработчика ... |
| 27.06.2024 | Как мы повышали производительность очереди сообщений | Работа в Яндексе ставит огромное количество технических вызовов, которые интересно решать. И один из них — это производительность основной очереди сообщений YDB Topics. Посмотрим, может ли опенсорсный продукт от Яндекса конкурировать с Apac... |
| 26.06.2024 | Логирование во фронтенд-приложениях. Опыт Звука | Всем привет! На связи Роман Савельев, фронтенд-разработчик в команде Звука. В этой статье я хочу поделиться опытом и рассказать, как мы с командой прошли путь от хаоса до выстроенной инфраструктуры и унифицировали работу с логами в собствен... |
| 26.06.2024 | Тестирование асинхронного контракта Spring Boot приложения (Kafka Consumer+Producer) | Приветствую тебя, Хабр! Сегодня мы попробуем разобраться, как написать интеграционный\сервисный\авто тест для Spring Boot приложения, которое взаимодействует с внешним миром исключительно с помощью Kafka. Сначала разберем проблему, а затем ... |
| 24.06.2024 | Микросервисы с Go-Micro на примере | Привет, Хабр!
Микросервисная архитектура представляет из себя подход, в котором каждый сервис отвечает за конкретную функциональность и может быть развернут, обновлен и масштабирован независимо от других. Go-Micro — это фреймворк, который у... |
| 20.06.2024 | История оптимизации Python сервиса: Маленький шаг для человека, гигантский скачок для сервиса | Привет, Хабр, на связи Okko! У нас одна из самых больших медиатек в России, поэтому мы постоянно работаем над развитием алгоритмов поиска и рекомендаций. Новые фичи тестируются с помощью А/Б тестов, количество фичей неустанно растет, поэтом... |
| 20.06.2024 | Нужна ли нам Lakehouse архитектура? | Когда озер и хранилищ данных недостаточно.
Изображение создано автором.Введение
Впервые я услышал термин "Lakehouse" в 2019 году, когда пролистывал документ Dremio. Будучи по своей натуре консервативным человеком, я предположил, ч... |
| 19.06.2024 | Интересные задачи, возможность найти себя и погружение в технологические процессы | Максим Феопентов
Максим Феопентов — член программного комитета новой конференции «Онтико» для айтишников в промышленности Industrial++. Он рассказал, что происходит в индустрии и зачем нужны конференции для программистов с заводов. Уже 5 ле... |
| 17.06.2024 | Что нового в Greenplum 7. Часть 2 | В прошлой части обзора изменений и нововведений Greenplum 7 мы рассмотрели миграцию движка Append Optimized таблиц на использование интерфейса табличных методов доступа, оптимизацию добавления столбцов в таблицы, а также изменения, связанны... |
| 10.06.2024 | Реализация итоговой согласованности. Разбор библиотеки event-outbox | Здравствуйте. Меня зовут Юрий Кехтер, я backend-разработчик на Python.
В этой статье я хотел бы рассказать об архитектурных шаблонах Transactional Outbox и Idempotent Consumer. Кроме того, я хотел бы показать собственную реализацию, содержа... |
| 10.06.2024 | Опыт разработки сервиса отправки сообщений в Apache Kafka с использованием SASL/Kerberos и Avro Schema Registry | Привет, Хабр! Сегодня я расскажу о своем опыте создания сервиса для отправки сообщений в Apache Kafka с использованием Spring Boot, аутентификацией SASL/Kerberos и применением Avro Schema Registry для продюсера. В процессе разработки я стол... |
| 07.06.2024 | Transactional Outbox: от идеи до open-source | Привет! На связи Миша Меркушин. Я тимлид команды Ruby Platform, ответственной за разработку внутренних библиотек и улучшение архитектуры микросервисов на Ruby в СберМаркете. Эта статья про архитектурный паттерн Outbox и инструмент, который ... |
| 06.06.2024 | Quickwit. Когда Elasticsearch слишком дорогой | «Дорогой» – конечно в прежде всего в переносном значении, Elasticsearch сложно устанавливать, настраивать и обновлять. Это хорошо известно всем, кто работал ES про проде. SaaS версия Elastic позволяет сэкономить время, но это решение по пон... |
| 05.06.2024 | Оптимизация настроек Kafka кластера. Часть 3. Сравнительное тестирование, мониторинг и тонкая настройка Kafka кластера... | Привет, Хабр! Представляю вам третью (заключительную) часть серии статей, посвященных оптимизации развертывания Kafka кластера (ссылка на первую и вторую части). Это перевод руководства от Confluent. Сегодняшняя статья посвящена сравнительн... |
| 03.06.2024 | Оптимизация настроек Kafka кластера. Часть 2. Механизмы управления задержкой, надежностью и доступностью | Привет, Хабр! Представляю вам вторую часть из серии статей, посвященных оптимизации развертывания Kafka кластера (ссылка на первую часть). Это перевод руководства от Confluent. Сегодняшняя статья посвящена тому, как уменьшить задержку и пов... |
| 31.05.2024 | Процессы собеседования со стороны соискателя | Я довольно часто видел мнение, что проходить собеседования это отдельный навык, не связанный с работой, и сам начал придерживаться такой позиции. Я спокойно работал, на поиск не отвлекался и в ус не дул. Но настал момент Х, когда мне пришло... |
| 30.05.2024 | Redis UI для администрирования сотен Redis инстансов | Введение
Управление сотнями Redis инстансов в разных окружениях может стать сложной задачей. В нашем случае, все это добро крутилось в кубернетес кластерах, которые являлись платформой для развертывание редисов внутренними командами. При по... |
| 30.05.2024 | Парсим ценники оффлайн не привлекая внимания охраны
Мониторь полочные цены или положишь зубы на полку
Особенности ценового мониторинга в офлайн-ритейле, или Волка ноги кормят
Автоматизация мониторинга... | В ритейле все должно быть разложено по полочкам — и товары, и ценники. Это не такая простая задача, как кажется на первый взгляд. Формирование собственных полочных цен требует постоянного мониторинга ценовой политики конкурентов.
В онлайн-п... |
| 29.05.2024 | Amplicode: учим IDE говорить на языке фреймворка | Вы когда-нибудь задумывались, как много кода, который мы пишем, предназначено именно для решения поставленных задач? Казалось бы, странный вопрос: зачем писать код, который не нужен? Но давайте подумаем, ставят ли разработчику бизнес-задачу... |
| 29.05.2024 | Оптимизация настроек Kafka кластера. Часть 1. Механизмы управления пропускной способностью | Привет, Хабр! Некоторое время назад я выкладывала статью об улучшении пропускной способности коннекторов Kafka Connect. Сегодня хочу представить вам перевод технического документа от Confluent об оптимизации развертывания самого Kafka класт... |
| 28.05.2024 | Апдейт, ещё апдейт: вышел Red Hat Enterprise Linux 8.10. Что нового? | Совсем недавно мы публиковали статью о выходе Red Hat Enterprise Linux 9.4. В то же время стоит помнить, что обновляется и прошлая ветка — это Red Hat Enterprise Linux 8.10. Разработчики будут поддерживать её минимум до 2029 года. Что касае... |
| 26.05.2024 | Типы совместимости в Schema Registry для Apache Kafka | В прошлой статье я писал о том, что такое Schema Registry и как используется в Apache Kafka. Сегодня я хочу углубиться в тему и описать поведение системы при различных типах совместимости . Правильное понимание и применение этих типов совме... |
| 23.05.2024 | Геосоциальное приложение «Кто/Где» от МТС: для чего и как мы его создавали | Привет, Хабр! В этой статье мы расскажем о мобильном приложении для обмена местоположением «Кто/Где». Оно позволяет в реальном времени видеть на карте, где находятся друзья и близкие, быстро и удобно назначая с ними встречи. Важный момент: ... |
| 22.05.2024 | Hydrolix raises $35M to expand streaming data lake operations and partner network
All storage is ‘hot’
High-scale and low-cost
Your vote of support is important to us and it helps us keep the content ... | Streaming data lake platform startup Hydrolix Inc. today announced that it has raised $35 million in new funding to fuel product development, expand sales operations and implement a partner program.
Founded in 2018, Hydolix offers a streami... |
| 22.05.2024 | Распределённый BPMS. Опыт Московской Биржи | Всем привет!
Меня зовут Сергей Максимов и я руковожу разработкой в Центре Управления Процессами (ЦУП) Московской Биржи. В статье я хочу рассказать о нашем опыте автоматизации бизнес-процессов (БП), когда система должна быть не только удобно... |
| 20.05.2024 | Как работать с MassTransit и RabbitMQ: реализуем RPC с Saga и без | Привет, Хабр! Меня зовут Евгений, я backend-разработчик SimbirSoft. В этой статье я разберу два варианта решения нетривиальной задачи создания RPC через брокер сообщений RabbitMQ и библиотеку MassTransit. Подробно разберём подключение MassT... |
| 20.05.2024 | Как я бэкенд для интернет-магазина пилил… | Привет, читатель! Это моя самая первая статья на тему программирования, на написание которой меня побудил интерес к микросервисной архитектуре.
Моя история начинается с конца июля 2023 года - того времени, когда я имея опыт программирования... |
| 17.05.2024 | Распределенная трассировка с Jaeger и Clickhouse | Привет! Меня зовут Филипп Бочаров, я руководитель центра мониторинга и наблюдаемости в МТС Digital. Мы делаем распределённую трассировку, чтобы контролировать качество наших сервисов и предотвращать аварии. В этой статье разберём, как добит... |
| 16.05.2024 | Как мы работаем со Stateful в Kubernetes: особенности и подводные камни | Всем привет! На связи Олег Сапрыкин, технический директор по инфраструктуре и тимлид DevOps-команд во «Фланте». В марте 2024 года мы с Андреем Радыгиным (ex-главный архитектор по внедрению Deckhouse) выступили на конференции DevOpsConf. Эта... |
| 15.05.2024 | ChatGPT + YandexGPT API = ЛЮБОФ. Часть 1 | Сказ о том, как мы, дата-сайентист и аналитик данных, на троих с ChatGPT, без программиста и девопса, создали сервис пересказа новостей TechMix с текстом и озвучкой. ChatGPT писал код, а мы ему только поддакивали.
Авторы: Эдуард Ланчев, Иль... |
| 13.05.2024 | Паттерн Poison Pill в Java | Привет, Хабр!
Сегодня поговорим о паттерне Poison Pill и его реализацию в Java.
Poison Pill, или "ядовитая пилюля", — это шаблон, используемый для мягкой остановки потока или процесса. Суть его заключается в отправке специального,... |
| 07.05.2024 | Разработчикам: рецензия на книгу «Node.js: разработка приложений в микросервисной архитектуре с нуля» | Компактная книга "Node.js: разработка приложений в микросервисной архитектуре с нуля" Юлии Поповой — выпущена в апреле 2024 г. как практическое руководство для разработчиков уровня джун и выше. Описан процесс создания микросервисо... |
| 02.05.2024 | Как Яндекс создал свою шину данных, чтобы передавать сотни гигабайт в секунду | 10 лет назад сотни серверов Яндекса работали на Apache Kafka®, но в этом продукте нам нравилось далеко не всё. Наши задачи требовали единой шины для передачи всех видов данных: от биллинговых до журналов приложений. Сегодня объёмы достигли ... |
| 02.05.2024 | Confluent’s expands managed Apache Flink service to simplify data streaming for generative AI
AI Model Inference
Auto-scaling for lower-latency workloads
Your vote of support is important to us and it... | Confluent Inc. today announced expanded capabilities for its managed service for Apache Flink, the open-source big data processing framework.
Unlike the regular open-source Flink, it comes with a novel AI Model Inference feature that organi... |
| 01.05.2024 | Перемещение указателя на смещение в Kafka | В данной статье описывается задача, в которой необходимо слушать сообщения с определенного смещения(offset) в Kafka. Для решения данной задачи потребуется интерфейс ConsumerSeekAware и найти позицию с которой нужно начать слушание. Так же н... |
| 29.04.2024 | Управление схемами в Kafka с использованием Schema Registry | Приветствую читателей! Меня зовут Темирлан, и на протяжении последних нескольких лет я активно использовал Apache Kafka в проектах в сферах финансовых технологий FinTech. Этот опыт позволил мне не только глубоко изучить возможности и преиму... |
| 25.04.2024 | Как настроить ETL с json’ами в Apache NiFi | Привет, Хабр! Меня зовут Сергей Евсеев, сегодня я расскажу, как в Apache NiFi настраивается ETL-пайплайн на задаче с JSON’ами. В этом мне помогут инструменты Jolt и Avro. Пост пригодится новичкам и тем, кто выбирает инструмент для решения с... |
| 24.04.2024 | kafka cluster in docker | Привет! В этой статье мы развернем dev-cluster kafka последней версии (3.7 на момент написания статьи), без использования zookeeper. Также в нашей сборке будет web-ui и все для мониторинга. В представленной конфигурации настроены SASL, SSL,... |
