home.social

#hadoop — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #hadoop, aggregated by home.social.

  1. Как я удалил clickstream, но его восстановили из небытия

    Всем привет! Я Дмитрий Немчин из Т-Банка. Расскажу не очень успешную историю о том как я удалил данные и что из этого вышло. В ИТ я больше 12 лет, начинал DBA и разработчиком в кровавом энтепрайзе с Oracle. В 2015 году познакомился с Greenplum в Т, да так тут и остался. С 2017 года стал лидить команду, потом все чуть усложнилось и команда стала не одна. Возможно, вы меня могли видеть как организатора Greenplum-митапов в России. Но команда командой, менеджмент менеджментом, а руки чешутся..

    habr.com/ru/companies/tbank/ar

    #parquet #удаление_данных #fail_story #hadoop

  2. Опыт Звука: как реализовать рекомендательную систему аудиокниг с использованием больших языковых моделей (LLM)

    Всем привет! На связи Дмитрий Берестнев , Chief Data Scientist в HiFi-стриминге Звук . Сегодня я расскажу о том, как мы реализовали систему подбора аудиокниг и зачем это вообще было сделано. В статье мы фокусируемся на принципе рекомендации похожих книг (а подходы для авторов в нашем случае были сделаны аналогично).

    habr.com/ru/companies/zvuk/art

    #ml #llm #recsys #python #qdrant #векторы #hadoop #s3 #presto #pyspark