#шины_данных — Public Fediverse posts

FESB и PostgreSQL. Кейс «Отметка по дате изменения»

Привет, Хабр! В этой статье я хочу подробно разобрать практический пример инкрементальной синхронизации данных между двумя базами PostgreSQL с использованием FESB. Материал получился достаточно объёмным, поскольку я решил показать не только общую идею, но и весь путь реализации: от подготовки таблиц и триггеров до настройки интеграционного процесса, первоначальной загрузки и обработки последующих изменений. Статья в первую очередь будет полезна разработчикам, интеграторам и архитекторам, которые работают с ESB, ETL и реляционными базами данных. Даже если вы не используете FESB, описанный подход с контрольной точкой и инкрементальной загрузкой можно адаптировать для других интеграционных платформ. Надеюсь, каждый читатель сможет найти в материале что-то полезное для своих задач — готовое решение, отдельный SQL-приём или идею для построения собственного интеграционного процесса.

https://habr.com/ru/articles/1071662/

#шины_данных #интеграция #интеграция_систем #cdc #change_data_capture #postgresql

Почему шины данных не всегда лучшее решение для синхронизации систем

При миграции из одной корпоративной системы в другую часто встает задача репликации данных. Например, при поэтапной замене ERP по методологии Parallel Running во время опытной эксплуатации пользователи работают в двух системах, которые оперируют идентичным набором данных. Если модели данных сильно отличаются, а при репликации присутствует дополнительная логика, то команды чаще всего пытаются использовать шины данных (например Kafka). При таком подходе требуется самостоятельно реализовать механизмы копирования данных, обработки конфликтов, пересинхронизации, мониторинга и т. д. Все это увеличивает трудозатраты и потенциально может стать источником проблем. В этой статье разберем техническую реализацию репликации данных через шины, ее слабые места, а также альтернативные подходы.

https://habr.com/ru/companies/haulmont/articles/1058574/

#erpсистемы #миграция #миграция_данных #синхронизация #синхронизация_данных #репликация #репликация_данных #parallel_running #erp #шины_данных

Что спросить у вендора ESB, если вы подбираете интеграционную шину

На связи Сергей Скирдин, технический директор ИТ-интегратора «Белый код». Последние два года я изучаю российский рынок ESB и интеграционных платформ, делаю обзоры на продукты. Есть интересная закономерность: многие компании, которые выбирают ESB, готовят собственный опросник. В прошлом году вместе с вендорами, мы решили составить единый опросный лист. Рассказываю и показываю, что из этого получилось.

https://habr.com/ru/companies/w_code/articles/1047550/

#шины_данных #опросный_лист #интеграции #коннектор #мониторинг #производительность #ESB #интеграционные_платформы #kafka #open_source

Обзор «Аметум ESB»

На связи Сергей Скирдин, технический директор компании «Белый код». Поставил себе цель — сделать обзоры на шины данных из реестра отечественного ПО. Сегодня в обзоре продукт «Аметум ESB». С 2024 года я встречаюсь с вендорами и делаю обзоры продуктов, которые относятся к классу ESB. За это время удалось пообщаться с разработчиками 20+ разных решений. Для всех, кто интересуется шинами данных, я также создал сообщество в Телеграме «Шины не для машины» . Это площадка для диалога между российскими разработчиками ESB и компаниями, которым нужна интеграционная шина.

https://habr.com/ru/companies/w_code/articles/1014262/

#шины_данных #шина_данных #корпоративная_шина_данных #ESB #интеграционная_платформа #интеграции #Аметум #spring #PostgreSQL

Обзор «Атом.Мост»

На связи Сергей Скирдин, технический директор компании «Белый код». Поставил себе цель — сделать обзоры на шины данных из реестра отечественного ПО. Сегодня в обзоре продукт «Атом.Мост». С 2024 года я встречаюсь с вендорами и делаю обзоры продуктов, которые относятся к классу ESB (корпоративная шина данных). За это время удалось пообщаться с разработчиками 15 разных решений. Для всех, кто интересуется шинами данных, я также создал сообщество в Телеграме «Шины не для машины» . Это площадка для диалога между российскими разработчиками ESB и компаниями, которым нужна интеграционная шина.

https://habr.com/ru/companies/w_code/articles/1011152/

#esb #шины_данных #корпоративная_шина_данных #атом_мост #росатом #интеграция #интеграция_сервисов #интеграция_систем #интеграция_данных

Интеграция 1С и «Первой Формы». Избавляемся от дублей с помощью DATAREON Platform

На связи Сергей Скирдин, технический директор ИТ-интегратора «Белый код». Прямая интеграция 1С и CRM или разных баз 1С может давать сбои. Например, в одном из недавних проектов у заказчика при стандартном обмене задваивались данные. Мы придумали, как решить проблему с помощью сервиса внутри DATAREON Platform. Короткий кейс, который показывает, как использовать возможности «посредника» для решения не совсем типовых задач.

https://habr.com/ru/companies/w_code/articles/965254/

#первая_форма #1с #1С_зуп #дубли #интеграция #ESB #шины_данных #интеграционная_платформа #datareon_platform

Есть ли гидравлический насос на складе у партнера? Объединили данные в КХД на базе DATAREON Platfrom

На связи Сергей Скирдин, технический директор ИТ-интегратора «Белый код». Рассказываю о проекте, в котором мы реализовали корпоративное хранилище данных (КХД) на базе DATAREON Platform для компании, занимающейся поставками дорожно-строительной техники и запчастей.

https://habr.com/ru/companies/w_code/articles/960964/

#datareon #интеграционная_платформа #интеграционные_решения #esb #шины_данных #кхд #корпоративное_хранилище_данных #dwh #Data_Warehouse

Батл вендоров 2.0: как настроили интеграционный поток создатели платформ DATAREON, Entaxy ION и USEBUS

На связи Сергей Скирдин, технический директор ИТ-интегратора «Белый код». В начале этого года мы провели первый батл между создателями отечественных интеграционных платформ и ESB. Позже захотели выполнить тестовое задание и другие команды. Выкладываю на ваш суд результаты батла.

https://habr.com/ru/companies/w_code/articles/914290/

#обзор #интеграции #esb #usetech #datareon #интеграции_сервисов #шины_данных #интеграционные_платформы #entaxy

Обзор интеграционной платформы RedMule

На связи Сергей Скирдин, технический директор компании «Белый код». C 2024 года делаю обзоры на шины данных из реестра отечественного ПО. Сегодня разбираю продукт RedMule.

https://habr.com/ru/companies/w_code/articles/913048/

#шины_данных #esb #обзор #интеграции #интеграции_сервисов

Обзор ESB Bercut

На связи Сергей Скирдин, технический директор компании «Белый код». Поставил себе цель — сделать обзоры на шины данных из реестра отечественного ПО. Сегодня в обзоре продукт ESB Bercut.

https://habr.com/ru/companies/w_code/articles/910578/

#шины_данных #esb #обзор #интеграции #интеграции_сервисов

DATAREON VS Apache NiFi

Всем привет! На связи Никита Скирдин, программист 1С ИТ-интегратора «Белый код». Статья появилась как результат небольшого исследования для одного из наших клиентов. Заказчик обратился с вопросом выбора интеграционного решения. Здесь оставляю результаты.

https://habr.com/ru/companies/w_code/articles/909890/

#сравнение #шины_данных #esb #datareon #apache_nifi #интеграция #интеграция_сервисов

Работа с кластером DATAREON Platform — обзор основных возможностей, включая модуль горячего восстановления

На связи Сергей Скирдин, технический директор ИТ-интегратора «Белый код». По моим предыдущим статьям, наверно, уже понятно, что я люблю разбираться с разными техническими решениями, поэтому когда DATAREON предложил мне тестовую лицензию на кластер с модулем горячего восстановления, я не стал отказываться. Будем разбираться с тем, как работает кластер серверов DATAREON и для чего нужен модуль горячего восстановления.

https://habr.com/ru/companies/w_code/articles/907372/

#шины_данных #esb #отказоустойчивость #отказоустойчивые_системы #datareon #обзор

Обзор интеграционной платформы Entaxy ION

На связи Сергей Скирдин, технический директор компании «Белый код». Поставил себе цель — сделать обзоры на шины данных из реестра отечественного ПО. Сегодня в обзоре продукт Entaxy ION.

https://habr.com/ru/companies/w_code/articles/906914/

#обзор #интеграции #интеграции_сервисов #шины_данных #esb

Обзор гибридной интеграционной платформы USEBUS

На связи Сергей Скирдин, технический директор компании «Белый код». Поставил себе цель — сделать обзоры на шины данных из реестра отечественного ПО. Сегодня в обзоре продукт USEBUS.

https://habr.com/ru/companies/w_code/articles/905048/

#обзор #интеграции #интеграции_сервисов #шины_данных #esb

Обзор интеграционной шины Factor-ESB

На связи Сергей Скирдин, технический директор компании «Белый код». Поставил себе цель — сделать обзоры на шины данных из реестра отечественного ПО. Сегодня в обзоре продукт Factor-ESB.

https://habr.com/ru/companies/w_code/articles/903192/

#esb #шины_данных #интеграция #интеграция_сервисов #обзор

Обзор цифровой платформы Peraspera Data Hunter

На связи Сергей Скирдин, технический директор компании «Белый код». Поставил себе цель — сделать обзоры на шины данных из реестра отечественного ПО. Сегодня в обзоре продукт Peraspera Data Hunter.

https://habr.com/ru/companies/w_code/articles/902014/

#esb #шины_данных #интеграция #интеграция_сервисов #обзор

Единый опросный лист для клиентов — разработчики ESB договорились о сотрудничестве

На связи Сергей Скирдин, технический директор ИТ-интегратора «Белый код». Недавно в сообществе, посвященном российским ESB, начали обсуждать проблему прозрачности всевозможных рейтингов. Пришли к тому, что вендорам стоит собраться и обсудить, что можно сделать своими силами. Я выступил как организатор и независимая сторона. В результате встречи решили, что будет правильно задать единые стандарты в отрасли.

https://habr.com/ru/companies/w_code/articles/900638/

#esb #шины_данных #интеграция #интеграция_сервисов

5 задач, которые в крупной компании по производству теплых полов решили с помощью «1С: Шины»

На связи Сергей Скирдин, технический директор ИТ-интегратора «Белый код». В этом кейсе на примере различных задач в базах 1С покажу, какие процессы можно оптимизировать с помощью шины данных.

https://habr.com/ru/companies/w_code/articles/899862/

#esb #интеграция #интеграция_сервисов #шины_данных #1с

Пример одной интеграции с помощью Red Mule, «Интегры», Factor-ESB — открытые результаты

На связи Сергей Скирдин, технический директор ИТ-интегратора «Белый код». Недавно мы провели своеобразный батл среди российских разработчиков шин данных и интеграционных платформ. Выкладываю результаты батла.

https://habr.com/ru/companies/w_code/articles/899052/

#вендоры #esb #шины_данных #интеграция #интеграция_сервисов