#amundsen — Public Fediverse posts

#dwr #freetube #fedibikes #MdRddG #NI #MdRzA #obob #fahrrad #frostpendeln #jamendo #CC

#TousledCraneonTour

#Welt! Bist du noch da?

#5m …

… muss ich noch überwinden, auf dem #Weg zur #Arbeit. Fühle mich dabei ein wenig wie #Amundsen. Ist machbar, aber im Dunklen durchaus eine #Herausforderung und im Moment wird es erst so langsam hell, wenn ich angekommen bin. Heute ist es etwas wärmer mit -3°C, der #Wind ist vernachlässigbar und #Niederschlagsmengen tendieren gegen #Null.

1/2

Как найти свой путь в дата-инженерии и управлять петабайтами данных

На первый взгляд работа с данными может показаться скучной, состоящей из перетаскивания данных из одного хранилища в другое. В этом действительно есть часть правды :) но не вся правда… Если присмотреться, мы увидим, что дата-инженеры помогают компаниям сокращать время на поиск инсайтов, обучение моделей и понимание нужд пользователей. Данные — это новая нефть, поэтому важно понимать, как правильно их организовывать и какие сложности в работе могут повлиять на успешность бизнеса. Привет, Хабр! Меня зовут Алёна Катренко, и я уже больше 10 лет работаю с данными. Сейчас занимаю позицию руководителя платформы данных в Циане, но начинала как BigData-инженер в Неофлексе. Сегодня расскажу, как мы приручали петабайты данных, искали призраков забытых таблиц и нашли инструмент, который сделал работу с метаданными понятной, безопасной и полезной для бизнеса. А ещё о том, как сейчас развиваться дату-инженеру, чтобы успевать за тенденциями на рынке.

https://habr.com/ru/companies/oleg-bunin/articles/940392/

#data_engineering #data_catalog #cloud_native #data_governance #data_ownership #amundsen #arenadata_catalog #data_lineage #scala #комьюнити