#s3_tables — Public Fediverse posts

「AWSで推進するデータマネジメント」というタイトルで登壇しました #devio2025
https://dev.classmethod.jp/articles/aws-data-management-devio2025/

#dev_classmethod #AWS #AWS_Lake_Formation #Amazon_DataZone #Amazon_S3_Vectors #S3_Metadata #S3_Tables #Amazon_SageMaker #AWS_Glue_Data_Quality

クラスメソッド データアナリティクス通信(AWSデータ分析編) – 2025年8月号
https://dev.classmethod.jp/articles/cm-news-analytics-202508/

#dev_classmethod #AWS #Amazon_SageMaker #SageMaker_Lakehouse #SageMaker_Unified_Studio #Amazon_DataZone #Amazon_Redshift #Amazon_Redshift_Serverless #AWS_Glue #Amazon_QuickSight #Amazon_Q_in_QuickSight #Amazon_OpenSearch_Service #Amazon_OpenSearch_Serverless #Amazon_EMR #Amazon_MSK #AWS_Clean_Rooms #AWS_Clean_Rooms_ML #S3_Tables #Amazon_S3_Vectors

[アップデート] Amazon S3 Tables の名前空間とテーブルも AWS CDK L2 Construct で構築可能になりました
https://dev.classmethod.jp/articles/aws-cdk-s3tables-namespace-and-table-l2-construct/

#dev_classmethod #S3_Tables #AWS_CDK

【AWS Glue】AWS GlueのBigQueryコネクタを使って直接BigQueryへデータを書き込んでみよう
https://dev.classmethod.jp/articles/aws-glue-bigquery-connector/

#dev_classmethod #AWS_Glue #S3_Tables #Google_BigQuery

【BigQuery】S3 Tables→BigQueryのデータ転送にJWTを使ってセキュアに実装したい
https://dev.classmethod.jp/articles/bigquery-jwt-s3-tables-to-bigquery/

#dev_classmethod #Google_Cloud_GCP #Google_BigQuery #S3_Tables

【Lake Formation】S3 Tables上のテーブルを使ったVIEWをクロスアカウント共有したかった
https://dev.classmethod.jp/articles/lake-formation-s3-tables-view-crossaccount/

#dev_classmethod #AWS_Lake_Formation #S3_Tables #AWS #Amazon_Athena

クラスメソッド データアナリティクス通信(AWSデータ分析編) – 2025年7月号
https://dev.classmethod.jp/articles/cm-news-analytics-202507/

#dev_classmethod #AWS #SageMaker_Unified_Studio #SageMaker_Lakehouse #Amazon_DataZone #Amazon_Athena #Amazon_Redshift_Serverless #AWS_Glue #Amazon_OpenSearch_Serverless #Amazon_OpenSearch_Service #Amazon_EMR #Amazon_MSK #Amazon_S3 #S3_Tables

特殊な区切り文字のファイルを Athena で S3 Tables に取り込む
https://dev.classmethod.jp/articles/irregular-delimiter-file-s3tables-athena/

#dev_classmethod #AWS #Amazon_S3 #S3_Tables #Amazon_Athena #小ネタ

【Iceberg】S3汎用バケットとS3 TablesにおけるIcebergパーティション追加設定の違い
https://dev.classmethod.jp/articles/iceberg-s3gp-s3tables-iceberg-add-partition/

#dev_classmethod #Apache_Iceberg #Amazon_S3 #S3_Tables #AWS_Glue

リソースリンクなしでAmazon Data FirehoseからAmazon S3 Tablesへのデータ配信を試してみた
https://dev.classmethod.jp/articles/data-firehose-s3-tables-without-resourcelink/

#dev_classmethod #AWS #Amazon_Data_Firehose #S3_Tables

[登壇レポート] Storage JAWS & BigData JAWS 共同開催 ~ S3×Icebergが切り拓く、OTF時代の分析基盤 ~ 「S3 Tables を図解でやさしくおさらい～基本から QuickSight 連携まで」 という内容で登壇してきました #storagejaws #bdjaws #jawsug
https://dev.classmethod.jp/articles/s3-tables-illustrated-basics-quicksight/

#dev_classmethod #S3_Tables #Apache_Iceberg #AWS #イベント #JAWS_UG

【S3 Tables】メンテナンスジョブのファイル圧縮について調べてみよう
https://dev.classmethod.jp/articles/s3-tables-file-compaction/

#dev_classmethod #S3_Tables #Amazon_S3 #Apache_Iceberg

[アップデート] Amazon S3 Tables がSSE-KMS(カスタマーマネージドキー)暗号化に対応したので調べてみた
https://dev.classmethod.jp/articles/2025-05-06-amazon-s3-tables-sse-kms/

#dev_classmethod #Amazon_S3 #S3_Tables #AWS_KMS #AWS_Key_Management_Service_KMS #AWS_CloudTrail

[アップデート] Amazon SageMaker Lakehouse がABAC（Attribute-Based Access Control）をサポートしたので試してみました
https://dev.classmethod.jp/articles/amazon-sagemaker-lakehouse-abac-support/

#dev_classmethod #AWS #SageMaker_Lakehouse #Amazon_Athena #S3_Tables

[参加レポート] 流しのエバンジェリストシリーズ AWSを中心として色んなサービスの基礎を学ぼう 「Amazon S3 Tables + Amazon Athena / Apache Iceberg」
https://dev.classmethod.jp/articles/awsbasics-s3-tables-athena-apache-iceberg/

#dev_classmethod #S3_Tables #Amazon_S3 #AWS_Glue_Data_Catalog #AWS_Glue #Amazon_Athena #AWS_Lake_Formation #AWS

クラスメソッド データアナリティクス通信(AWSデータ分析編) – 2025年4月号
https://dev.classmethod.jp/articles/cm-news-analytics-202504/

#dev_classmethod #AWS #SageMaker_Unified_Studio #SageMaker_Lakehouse #S3_Tables #Amazon_Redshift #Amazon_Redshift_Serverless #AWS_Glue #Amazon_QuickSight #Amazon_DataZone #AWS_Clean_Rooms #AWS_Lake_Formation

LambdaからDuckDBを使って、S3 TablesのIcebergテーブルにアクセスしてみた
https://dev.classmethod.jp/articles/try-to-access-iceberg-in-s3-tables-from-lambda-using-duckdb/

#dev_classmethod #S3_Tables #DuckDB #Apache_Iceberg #AWS

VPCフローログをAmazon Data Firehose経由でS3 Tablesに書き込んでみた
https://dev.classmethod.jp/articles/vpc-flow-logs-to-s3-tables-via-firehose-with-lambda-transformation/

#dev_classmethod #AWS #Amazon_Data_Firehose #Amazon_S3 #S3_Tables

AWS FirehoseでApache Icebergテーブルに配信する際の「一意のキー設定」と「JSONQuery式（JQ式）」の違いについて
https://dev.classmethod.jp/articles/aws-firehose-s3-tables-jq-unique-keys-difference/

#dev_classmethod #AWS #Amazon_Data_Firehose #Amazon_S3 #S3_Tables #Apache_Iceberg

S3 Tables 向けの Iceberg REST Catalog API が追加されたので、PyIcebergからアクセスしてみた。
https://dev.classmethod.jp/articles/add-s3-tables-iceberg-rest-catalog-api/

#dev_classmethod #S3_Tables #Apache_Iceberg #AWS_Lambda #AWS

[アップデート]Amazon Data Firehose から S3 Tables へ直接データ配信できるようになりました
https://dev.classmethod.jp/articles/aws-firehose-s3-tables-integration-tutorial/

#dev_classmethod #AWS #Amazon_Data_Firehose #Amazon_S3 #S3_Tables

【S3 Tables】スナップショット削除の実行タイミングを確認してみた
https://dev.classmethod.jp/articles/s3-tables-snapshots-delete-schedule/

#dev_classmethod #S3_Tables #Amazon_S3 #Apache_Iceberg

【S3 Tables】ローカルのVSCodeからS3 Tables上のIcebergテーブルを触りたい
https://dev.classmethod.jp/articles/s3-tables-iceberg-local-vscode/

#dev_classmethod #Apache_Iceberg #S3_Tables #Amazon_S3 #Python

【S3 Tables】汎用バケットで作成したIcebergのテーブルをそのままS3Tablesに移行できるのか？
https://dev.classmethod.jp/articles/s3-tables-iceberg-migration/

#dev_classmethod #S3_Tables #Amazon_S3 #Apache_Iceberg

PyIcebergを使ってLambdaからS3 TablesのIcebergテーブルに書き込んでみる
https://dev.classmethod.jp/articles/tried-to-write-to-iceberg-tables-in-s3-tables-from-lambda-using-pyiceberg/

#dev_classmethod #AWS #S3_Tables #Apache_Iceberg #AWS_Lambda

Amazon S3 Tables の Iceberg テーブルに Amazon Athenaから更新クエリを試す！（今更だったらゴメンね）
https://dev.classmethod.jp/articles/amazon-s3-tables-update-query-using-athena/

#dev_classmethod #AWS #S3_Tables #Amazon_Athena #Apache_Iceberg

SQLite3データをData Firehose経由でS3 TablesのIcebergテーブルに格納する
https://dev.classmethod.jp/articles/store-sqlite3-data-in-iceberg-tables-s3tables-via-data-firehose/

#dev_classmethod #Amazon_Data_Firehose #S3_Tables #Amazon_S3 #SQLite #AWS_CDK #AWS_CLI

クラスメソッド データアナリティクス通信(AWSデータ分析編) – 2025年1月号
https://dev.classmethod.jp/articles/cm-news-analytics-202501/

#dev_classmethod #AWS #S3_Tables #SageMaker_Platform #SageMaker_Lakehouse #Amazon_Redshift #Amazon_Redshift_Serverless #Amazon_Athena #AWS_Glue #Amazon_QuickSight #Amazon_DataZone #AWS_Clean_Rooms #AWS_Clean_Rooms_ML #Amazon_OpenSearch_Service #AWS_Lake_Formation

Amazon S3 Table の「メンテナンス」を設定してみた
https://dev.classmethod.jp/articles/amazon-s3-table-maintenance/

#dev_classmethod #S3_Tables #Amazon_S3 #Apache_Iceberg

S3 Tables の Iceberg テーブルを Amazon Redshift でクエリ実行する #AWSreInvent
https://dev.classmethod.jp/articles/amazon-s3-tables-redshift-reinvent/

#dev_classmethod #AWS #S3_Tables #Amazon_Redshift #Amazon_Redshift_Serverless #Amazon_Athena #AWS_Lake_Formation

「祝！Iceberg祭開幕！re:Invent 2024データレイク関連アップデート10分総ざらい」という登壇をしました #regrowth_osaka
https://dev.classmethod.jp/articles/regrowth-osaka-2024-iceberg-festival/

#dev_classmethod #Apache_Iceberg #AWS #S3_Tables #S3_Metadata #Amazon_Data_Firehose

[re:Growth 2024 札幌]「Amazon SageMaker Unified Studio（Preview）、Lakehouse と Amazon S3 Tables」というタイトルで登壇しました！ #regrowth_sapporo #AWSreInvent
https://dev.classmethod.jp/articles/re-growth-sap-2024-analytics-updates/

#dev_classmethod #AWS #S3_Tables #SageMaker_Lakehouse #SageMaker_Unified_Studio