#iceberg — Public Fediverse posts
Live and recent posts from across the Fediverse tagged #iceberg, aggregated by home.social.
-
https://www.europesays.com/ie/499129/ Antarctic station discovers its shipping containers floating away on iceberg after blizzard #Antarctic #Antarctica #base #BreakAway #Éire #Environment #german #Iceberg #IE #Ireland #NeumayerStation #Science #ShippingContainer #tas
-
https://www.europesays.com/uk/978943/ Antarctic station discovers its shipping containers floating away on iceberg after blizzard #Antarctic #Antarctica #Base #BreakAway #Environment #german #Iceberg #NeumayerStation #Science #ShippingContainer #tas #UK #UnitedKingdom
-
Antarctic station discovers its shipping containers floating away on iceberg after blizzard
From the air, they look like seven little ants on a torn piece of white paper. But a…
#NewsBeep #News #Environment #antarctic #antarctica #AU #Australia #Base #breakaway #german #Iceberg #neumayerstation #Science #shippingcontainer #tas
https://www.newsbeep.com/au/688385/ -
Antarctic station discovers its shipping containers floating away on iceberg after blizzard
From the air, they look like seven little ants on a torn piece of white paper. But a…
#NewsBeep #News #Environment #antarctic #antarctica #AU #Australia #Base #breakaway #german #Iceberg #neumayerstation #Science #shippingcontainer #tas
https://www.newsbeep.com/au/688385/ -
Строим машину времени для данных (SCD-2) на движке Trino под управлением Airflow
Сегодня SCD-2-таблицы не только остаются актуальными для медленно меняющихся данных, но и, на мой взгляд, становятся гораздо проще в реализации благодаря новым технологиям и инструментам. Мне поручили пересобрать витрину в ходе миграции в наше новое хранилище данных. Итак, в этой статье мы будем: — строить Iceberg-таблицы SCD-2 с помощью Trino, SQL и Python; — попутно освоим прекрасные функции merge, MD5 и другие полезные инструменты; — напишем свой собственный оператор для Airflow для автоматизации ETL-процесса.
https://habr.com/ru/companies/X5Tech/articles/1034656/
#scd_type_2 #trino #iceberg #airflow #lakehouse #etl #slowly_changing_dimensions #data_mesh #витрина_данных #хранилище_данных
-
Строим машину времени для данных (SCD-2) на движке Trino под управлением Airflow
Сегодня SCD-2-таблицы не только остаются актуальными для медленно меняющихся данных, но и, на мой взгляд, становятся гораздо проще в реализации благодаря новым технологиям и инструментам. Мне поручили пересобрать витрину в ходе миграции в наше новое хранилище данных. Итак, в этой статье мы будем: — строить Iceberg-таблицы SCD-2 с помощью Trino, SQL и Python; — попутно освоим прекрасные функции merge, MD5 и другие полезные инструменты; — напишем свой собственный оператор для Airflow для автоматизации ETL-процесса.
https://habr.com/ru/companies/X5Tech/articles/1034656/
#scd_type_2 #trino #iceberg #airflow #lakehouse #etl #slowly_changing_dimensions #data_mesh #витрина_данных #хранилище_данных
-
Строим машину времени для данных (SCD-2) на движке Trino под управлением Airflow
Сегодня SCD-2-таблицы не только остаются актуальными для медленно меняющихся данных, но и, на мой взгляд, становятся гораздо проще в реализации благодаря новым технологиям и инструментам. Мне поручили пересобрать витрину в ходе миграции в наше новое хранилище данных. Итак, в этой статье мы будем: — строить Iceberg-таблицы SCD-2 с помощью Trino, SQL и Python; — попутно освоим прекрасные функции merge, MD5 и другие полезные инструменты; — напишем свой собственный оператор для Airflow для автоматизации ETL-процесса.
https://habr.com/ru/companies/X5Tech/articles/1034656/
#scd_type_2 #trino #iceberg #airflow #lakehouse #etl #slowly_changing_dimensions #data_mesh #витрина_данных #хранилище_данных
-
Строим машину времени для данных (SCD-2) на движке Trino под управлением Airflow
Сегодня SCD-2-таблицы не только остаются актуальными для медленно меняющихся данных, но и, на мой взгляд, становятся гораздо проще в реализации благодаря новым технологиям и инструментам. Мне поручили пересобрать витрину в ходе миграции в наше новое хранилище данных. Итак, в этой статье мы будем: — строить Iceberg-таблицы SCD-2 с помощью Trino, SQL и Python; — попутно освоим прекрасные функции merge, MD5 и другие полезные инструменты; — напишем свой собственный оператор для Airflow для автоматизации ETL-процесса.
https://habr.com/ru/companies/X5Tech/articles/1034656/
#scd_type_2 #trino #iceberg #airflow #lakehouse #etl #slowly_changing_dimensions #data_mesh #витрина_данных #хранилище_данных
-
Spent some time chasing icebergs offshore eastern #Newfoundland yesterday. There were ducks fighting for the camera's attention!
I think I see a troll face in the iceberg.
-
春の花 Весняні квіти
混沌の暗闇に一粒の希望が降り注ぎ
Єдина крапля надії падає в темряву хаосуhttps://note.com/poison_raika/n/nf7710a333d33
<>
#single #grain #hope #falls #darkness #chaos #take #root #earth #blooms #flower #seeds #warm #light #sprout #iceberg #long #winter #end #field #cover #ice #melts #river #future #crimson #ghost #purified #painful #evil #washed #away #dark #clear
-
When does #Iceberg beat #Parquet+projection on #AWSGlue, and when doesn't ?
An end-to-end #ETL PoC on #AWS to find out: producer, #Kinesis, two #Firehose paths, two #Glue jobs, #Athena.
🔮 Spoiler: how the data is read is the key to the choice.
In the article: every choice with its why, plus a few gems from some Glue experience 😄
-
When does #Iceberg beat #Parquet+projection on #AWSGlue, and when doesn't ?
An end-to-end #ETL PoC on #AWS to find out: producer, #Kinesis, two #Firehose paths, two #Glue jobs, #Athena.
🔮 Spoiler: how the data is read is the key to the choice.
In the article: every choice with its why, plus a few gems from some Glue experience 😄
-
apache iceberg и его философия
iceberg и его философия metadata расскажем почему iceberg эффективно выполняет запросы и прост в управлении данными благодаря своей metadata
https://habr.com/ru/articles/1033546/
#iceberg #metadata #data_lake #s3 #hdfs #data_lakehouse #acid #olap
-
apache iceberg и его философия
iceberg и его философия metadata расскажем почему iceberg эффективно выполняет запросы и прост в управлении данными благодаря своей metadata
https://habr.com/ru/articles/1033546/
#iceberg #metadata #data_lake #s3 #hdfs #data_lakehouse #acid #olap
-
apache iceberg и его философия
iceberg и его философия metadata расскажем почему iceberg эффективно выполняет запросы и прост в управлении данными благодаря своей metadata
https://habr.com/ru/articles/1033546/
#iceberg #metadata #data_lake #s3 #hdfs #data_lakehouse #acid #olap
-
apache iceberg и его философия
iceberg и его философия metadata расскажем почему iceberg эффективно выполняет запросы и прост в управлении данными благодаря своей metadata
https://habr.com/ru/articles/1033546/
#iceberg #metadata #data_lake #s3 #hdfs #data_lakehouse #acid #olap
-
Moody photo for moody people…
-
Moody photo for moody people…
-
Moody photo for moody people…
-
Moody photo for moody people…
-
Moody photo for moody people…
-
-
-
-
-
Tuesday feels like “Iceberg, right ahead!” #iceberg #arctic #nunavut #blackandwhite #monochrome #classicmono #EastCoastKin
-
Tuesday feels like “Iceberg, right ahead!” #iceberg #arctic #nunavut #blackandwhite #monochrome #classicmono #EastCoastKin
-
Tuesday feels like “Iceberg, right ahead!” #iceberg #arctic #nunavut #blackandwhite #monochrome #classicmono #EastCoastKin
-
Tuesday feels like “Iceberg, right ahead!” #iceberg #arctic #nunavut #blackandwhite #monochrome #classicmono #EastCoastKin
-
Tuesday feels like “Iceberg, right ahead!” #iceberg #arctic #nunavut #blackandwhite #monochrome #classicmono #EastCoastKin
-
ADB のカタログにマウントしたIceberg テーブルに自然言語検索（Select AI）してみた
https://qiita.com/yushibats/items/c65b23462994e8f4c579?utm_campaign=popular_items&utm_medium=feed&utm_source=popular_items -
ADB のカタログにマウントしたIceberg テーブルに自然言語検索（Select AI）してみた
https://qiita.com/yushibats/items/c65b23462994e8f4c579?utm_campaign=popular_items&utm_medium=feed&utm_source=popular_items -
#epsteinfiles is just the tip of the #iceberg that is the #corruption of #washington and other capitalist capitals #trump #compromised #israel #politics in #usa is not even good for #comedy anymore #epstein #crime #criminals #netanyahoo #iran #war #corruption #corrupt and #decadence of a #corrupt #evil #oil and #money #empire this video is important for the last ... to realize that
-
#epsteinfiles is just the tip of the #iceberg that is the #corruption of #washington and other capitalist capitals #trump #compromised #israel #politics in #usa is not even good for #comedy anymore #epstein #crime #criminals #netanyahoo #iran #war #corruption #corrupt and #decadence of a #corrupt #evil #oil and #money #empire this video is important for the last ... to realize that
-
#epsteinfiles is just the tip of the #iceberg that is the #corruption of #washington and other capitalist capitals #trump #compromised #israel #politics in #usa is not even good for #comedy anymore #epstein #crime #criminals #netanyahoo #iran #war #corruption #corrupt and #decadence of a #corrupt #evil #oil and #money #empire this video is important for the last ... to realize that
-
#epsteinfiles is just the tip of the #iceberg that is the #corruption of #washington and other capitalist capitals #trump #compromised #israel #politics in #usa is not even good for #comedy anymore #epstein #crime #criminals #netanyahoo #iran #war #corruption #corrupt and #decadence of a #corrupt #evil #oil and #money #empire this video is important for the last ... to realize that
-
Современный дата-стек: потоковая система из «LEGO»
Вы слышали о Kafka , MQTT , S3 , Iceberg , Trino , PostgreSQL , Redis и Flink ? А насколько хорошо вы знаете эти технологии? По каждой из них написаны огромные книги («Kafka: The Definitive Guide», около 800 страниц), и каждый день выходят новые публикации про тонкости. Эта статья про другое. Вместо внутренностей движков и законов распределённых систем посмотрим на эти технологии как на кубики LEGO: какую роль каждая из них играет в архитектуре и как они стыкуются друг с другом. Это будет практический туториал: начнём с минимальной конфигурации и постепенно соберём сложную систему. Статью можно просто читать как обзор архитектуры, а можно запускать каждую конфигурацию и изучать её в деталях. Для этого достаточно Git , Git LFS и Docker Compose . Всё запускается в контейнерах. Даже примеры на Java собираются через Docker multi-stage build .
-
Современный дата-стек: потоковая система из «LEGO»
Вы слышали о Kafka , MQTT , S3 , Iceberg , Trino , PostgreSQL , Redis и Flink ? А насколько хорошо вы знаете эти технологии? По каждой из них написаны огромные книги («Kafka: The Definitive Guide», около 800 страниц), и каждый день выходят новые публикации про тонкости. Эта статья про другое. Вместо внутренностей движков и законов распределённых систем посмотрим на эти технологии как на кубики LEGO: какую роль каждая из них играет в архитектуре и как они стыкуются друг с другом. Это будет практический туториал: начнём с минимальной конфигурации и постепенно соберём сложную систему. Статью можно просто читать как обзор архитектуры, а можно запускать каждую конфигурацию и изучать её в деталях. Для этого достаточно Git , Git LFS и Docker Compose . Всё запускается в контейнерах. Даже примеры на Java собираются через Docker multi-stage build .
-
Современный дата-стек: потоковая система из «LEGO»
Вы слышали о Kafka , MQTT , S3 , Iceberg , Trino , PostgreSQL , Redis и Flink ? А насколько хорошо вы знаете эти технологии? По каждой из них написаны огромные книги («Kafka: The Definitive Guide», около 800 страниц), и каждый день выходят новые публикации про тонкости. Эта статья про другое. Вместо внутренностей движков и законов распределённых систем посмотрим на эти технологии как на кубики LEGO: какую роль каждая из них играет в архитектуре и как они стыкуются друг с другом. Это будет практический туториал: начнём с минимальной конфигурации и постепенно соберём сложную систему. Статью можно просто читать как обзор архитектуры, а можно запускать каждую конфигурацию и изучать её в деталях. Для этого достаточно Git , Git LFS и Docker Compose . Всё запускается в контейнерах. Даже примеры на Java собираются через Docker multi-stage build .
-
Современный дата-стек: потоковая система из «LEGO»
Вы слышали о Kafka , MQTT , S3 , Iceberg , Trino , PostgreSQL , Redis и Flink ? А насколько хорошо вы знаете эти технологии? По каждой из них написаны огромные книги («Kafka: The Definitive Guide», около 800 страниц), и каждый день выходят новые публикации про тонкости. Эта статья про другое. Вместо внутренностей движков и законов распределённых систем посмотрим на эти технологии как на кубики LEGO: какую роль каждая из них играет в архитектуре и как они стыкуются друг с другом. Это будет практический туториал: начнём с минимальной конфигурации и постепенно соберём сложную систему. Статью можно просто читать как обзор архитектуры, а можно запускать каждую конфигурацию и изучать её в деталях. Для этого достаточно Git , Git LFS и Docker Compose . Всё запускается в контейнерах. Даже примеры на Java собираются через Docker multi-stage build .
-
@thealexmerced thanks! Added to wish list in manning. Better 2buy there vs Amazon to get the ai features?
I guess Manning got rid of old option to buy coins 2 read individual pages? was a cool feature 2 bad.
Thanks for reminder about #datafusion i guess it & #polars have excellent #iceberg support & can be used from #rust
I was thinking about replacing a #pyspark glue job with a rust #lambda on #aws
Just found your excellent medium account. Best of luck at your upcoming talk!
-
@thealexmerced thanks! Added to wish list in manning. Better 2buy there vs Amazon to get the ai features?
I guess Manning got rid of old option to buy coins 2 read individual pages? was a cool feature 2 bad.
Thanks for reminder about #datafusion i guess it & #polars have excellent #iceberg support & can be used from #rust
I was thinking about replacing a #pyspark glue job with a rust #lambda on #aws
Just found your excellent medium account. Best of luck at your upcoming talk!
