home.social

#kafka — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #kafka, aggregated by home.social.

  1. The Architecture Decisions CAIOs Cannot Delegate to Engineering

    Architecture decisions, batch versus online prediction, cloud versus edge, offline versus online learning, coupled versus decoupled models. determine whether an AI system scales safely or collapses under real-world use. CAIOs and architects who get these trade-offs wrong don't get bad models; they get expensive rebuilds, stale predictions, or systems that optimize for outrage instead of value.

    hernanhuwyler.wordpress.com/20

  2. The Architecture Decisions CAIOs Cannot Delegate to Engineering

    Architecture decisions, batch versus online prediction, cloud versus edge, offline versus online learning, coupled versus decoupled models. determine whether an AI system scales safely or collapses under real-world use. CAIOs and architects who get these trade-offs wrong don't get bad models; they get expensive rebuilds, stale predictions, or systems that optimize for outrage instead of value.

    hernanhuwyler.wordpress.com/20

  3. The Architecture Decisions CAIOs Cannot Delegate to Engineering

    Architecture decisions, batch versus online prediction, cloud versus edge, offline versus online learning, coupled versus decoupled models. determine whether an AI system scales safely or collapses under real-world use. CAIOs and architects who get these trade-offs wrong don't get bad models; they get expensive rebuilds, stale predictions, or systems that optimize for outrage instead of value.

    hernanhuwyler.wordpress.com/20

  4. The Architecture Decisions CAIOs Cannot Delegate to Engineering

    Architecture decisions, batch versus online prediction, cloud versus edge, offline versus online learning, coupled versus decoupled models. determine whether an AI system scales safely or collapses under real-world use. CAIOs and architects who get these trade-offs wrong don't get bad models; they get expensive rebuilds, stale predictions, or systems that optimize for outrage instead of value.

    hernanhuwyler.wordpress.com/20

  5. The Architecture Decisions CAIOs Cannot Delegate to Engineering

    Architecture decisions, batch versus online prediction, cloud versus edge, offline versus online learning, coupled versus decoupled models. determine whether an AI system scales safely or collapses under real-world use. CAIOs and architects who get these trade-offs wrong don't get bad models; they get expensive rebuilds, stale predictions, or systems that optimize for outrage instead of value.

    hernanhuwyler.wordpress.com/20

  6. DoorDash's new Entity Cache runs on Envoy and Valkey, caching over 100 endpoints across 50 services at 1.5M requests/sec with 99.99999% availability.

    Using Kafka-driven invalidation and the XFetch algorithm, it reduces cache stampedes and cuts P99 latency spikes by up to 80%.

    Read the full story on InfoQ 👉 bit.ly/45jwGvi

    #Caching #Envoy #Valkey #Kafka #DistributedSystems #InfoQ

  7. Ab dem vierten Versuch klappt es langsam, dass die Tinte nach dem frischen Eintauchen nicht bei den ersten Buchstaben das Papier flutet. Erkennbar am Anfang, an "Unter*tanin*" und "gerade". In der zweiten Hälfte treten keine zerlaufenen Buchstaben mehr über die Ufer :)

    #calligraphy #fraktur #kafka

  8. PostgreSQL и аналитика: что меняется, когда хранилище становится общим

    HTAP — одна из главных тем в мире СУБД. Вокруг PostgreSQL массово появляются конструкции с внешними аналитическими движками со своими моделями хранения данных и ограничениями совместимости, однако бизнесу не совсем комфортно жить в архитектуре, где транзакционные данные находятся в одной системе, аналитика - в другой, а между ними - разного рода ETL, CDC и прочие parquet-файлы. В Tantor мы движемся по иному пути, развивая HTAP внутри PostgreSQL, а не рядом с ним. Вокруг этой идеи строятся СУБД Tantor Polar и машина баз данных Tantor XData Gen3, в которой OLTP и аналитика, не теряя совместимости с Postgres, работают поверх общего хранилища данных и общей видимости транзакций. В этой статье хочется поговорить не столько о самом термине HTAP, сколько о том, как меняется архитектура PostgreSQL, когда OLTP и аналитика начинают работать поверх общего хранилища данных.

    habr.com/ru/companies/tantor/a

    #tantor #tantor_postgres #xdata #tantor_xdata #oracle_exadata #duckdb #greenplum #kafka #clickhouse

  9. Как мы строили MVP data lineage системы в ЮMoney

    Привет, меня зовут Юля, я дата-инженер в департаменте аналитических решений ЮMoney. Мы разрабатываем и поддерживаем ETL(ELT)-процессы загрузки данных для BI-продуктов компании: отчётов, дашбордов, витрин, API и других. В этой статье поделюсь, как мы разрабатывали MVP для построения data lineage системы и к каким выводам пришли, — так вы сможете адаптировать подход под свои процессы. Проблема, которая привела нас к разработке MVP, заключается в том, что в начале работы над большинством задач требуется подготовительная аналитика: восстановить путь происхождения данных, чтобы понимать, какие ETL(ELT)-процессы будут затронуты и на что повлияют изменения. Это увеличивает время выполнения задачи. Но, что ещё существеннее, процесс достаточно рутинный: каждый раз необходимо проводить статический анализ кода и изучать документацию (при её наличии). Мы решили автоматизировать эту работу, чтобы иметь под рукой инструмент для построения пути данных по точкам их обработки и применения, — то есть создать data lineage систему.

    habr.com/ru/companies/yoomoney

    #data_lineage #etl #elt #dwh #neo4j #kafka #cypher #data_governance #mvp #метаданные

  10. DAS SCHLOSS
    im @blnensemble
    von Georgia Bruce nach Motiven von Franz #Kafka und Albert #Camus ist als Kampf eines trans Mannes mit Bürokratie und Selbstbild fein inszeniert. Mit einem starken, teils trans Ensemble.
    Das Stück entstand in der Reihe WORX, dem internationalen Nachwuchsprogramm des BE.

    #Theater #Berlin #Schauspiel #BerlinerEnsemble #BE

  11. Heute gehts ins @blnensemble in
    DAS SCHLOSS
    oder wir müssen uns K. als einen glücklichen Menschen vorstellen
    von Georgia Bruce nach Motiven von Franz #Kafka und Albert #Camus

    Das Stück verbindet Motive aus Kafkas DAS SCHLOSS mit DER MYTHOS DES SISYPHOS von Camus. Interessante Kombination. Ich bin gespannt.

    #Theater #Berlin #Schauspiel #BerlinerEnsemble #BE

  12. Fast Lane / Slow Lane: разделение трафика через две очереди Kafka

    Привет, Хабр! Сегодня мы рассмотрим Fast Lane / Slow Lane для Kafka: как одним росчерком кода защитить SLA‑критичный поток от толстых сообщений, не перекраивая пол‑стека и не устраивая зоопарк из очередей.

    habr.com/ru/companies/otus/art

    #kafka #Apache_Kafka #Fast_Lane #Slow_Lane #разделение_трафика #приоритизация_сообщений #Kafka_consumer #Kafka_producer #kafka_streams #Kafka_RecordInterceptor

  13. Melanconia e fine del mondo
    In un’epoca di catastrofi, di continue guerre sanguinose, l’ultimo libro del filosofo Byung-Chul Han parla della pandemia di angoscia che sta colpendo il mondo. Il filosofo Paolo Godani, che si autodefinisce “clinico della civiltà” vede nella melanconia, il disagio
    perunaltracitta.org/homepage/2
    #KillBilly #LaCittInvisibile #indistruttibile #kafka #MelanconiaEFineDelMondo #PaoloGodani #recensioni #Schopenhauer

  14. Here's the next core concept video on Farnz Kafka's The Metamorphosis, looking at three different kinds of reactions and attitudes the minor characters exhibit towards Gregor Samsa

    youtu.be/M7IxpUvTU6k
    #Video #Kafka #Metamorphosis #Reactions #Emotion #Horror #Friendliness

  15. Leuker kunnen ze het bij de gemeentebelastingen niet maken, wel ingewikkelder en moeilijker voor rolstoelbussen. Twee handelen extra per bezoek. En we bezoeken meercdan 100 keer Amsterdam. #rolstoelhockey #gpk #kafka