home.social

#google_cloud_storage — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #google_cloud_storage, aggregated by home.social.

  1. :rss: DevelopersIO @[email protected] ·

    ストレージ統合を使って Snowflake on AWS から BigQuery にデータを転送してみた
    dev.classmethod.jp/articles/st

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Snowflake #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_bigquery #snowflake #google_cloud_storage
  2. :rss: DevelopersIO @[email protected] ·

    BigQuery で非構造化データを扱う新機能 ObjectRef 型を使ってみた
    dev.classmethod.jp/articles/bi

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Google_Cloud_Storage #Gemini #Vertex_AI

    #dev_classmethod #google_cloud_gcp #google_bigquery #google_cloud_storage #gemini #vertex_ai
  3. :rss: DevelopersIO @[email protected] ·

    Cloud Storage(ウェブサイトホスティング) + App Engine(FastAPI) でFirebase Authenticationの認証フローを組んでみた
    dev.classmethod.jp/articles/20

    #dev_classmethod #Firebase #Google_Cloud_GCP #Google_App_Engine #Google_Cloud_Storage #fastapi #Python #Cloud_Build

    #dev_classmethod #firebase #google_cloud_gcp #google_app_engine #google_cloud_storage #fastapi
  4. :rss: DevelopersIO @[email protected] ·

    n8nのAIエージェントにおいてCloud StorageからJSONを読み込むツールがエラーになるのをなんとかしたい
    dev.classmethod.jp/articles/5b

    #dev_classmethod #AI #Google_Cloud_Storage

    #dev_classmethod #ai #google_cloud_storage
  5. :rss: DevelopersIO @[email protected] ·

    Google Cloudで「AthenaからS3に対してクエリ」みたいなことをやるにはどうやる？
    dev.classmethod.jp/articles/go

    #dev_classmethod #Google_BigQuery #Google_Cloud_Storage #Google_Cloud_GCP

    #dev_classmethod #google_bigquery #google_cloud_storage #google_cloud_gcp
  6. :rss: DevelopersIO @[email protected] ·

    AWS DataSyncでGoogleCloudStorageからS3にデータ転送してみた
    dev.classmethod.jp/articles/aw

    #dev_classmethod #AWS #AWS_DataSync #Amazon_S3 #Google_Cloud_Storage

    #dev_classmethod #aws #aws_datasync #amazon_s3 #google_cloud_storage
  7. :rss: DevelopersIO @[email protected] ·

    AWS DataSyncでGoogleCloudStorageからS3にデータ転送してみた
    dev.classmethod.jp/articles/aw

    #dev_classmethod #AWS #AWS_DataSync #Amazon_S3 #Google_Cloud_Storage

    #dev_classmethod #aws #aws_datasync #amazon_s3 #google_cloud_storage
  8. :rss: DevelopersIO @[email protected] ·

    [速報]Google Cloud Next '25 開幕！Keynote セッションサマリ
    dev.classmethod.jp/articles/go

    #dev_classmethod #Google_Cloud_GCP #Vertex_AI #Google_Cloud_Storage #Gemini

    #dev_classmethod #google_cloud_gcp #vertex_ai #google_cloud_storage #gemini
  9. :rss: DevelopersIO @[email protected] ·

    pyarrowでCloud Storage 上の Parquet ファイルのスキーマ情報を取得した場合、ファイル全量ではなくメタデータのみ取得しているか確認してみた
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_cloud_storage
  10. :rss: DevelopersIO @[email protected] ·

    Cloud Storage 上の Parquet ファイルのスキーマ情報をメタデータのみで取得する
    dev.classmethod.jp/articles/gc

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage #Apache_Parquet #Python

    #dev_classmethod #google_cloud_gcp #google_cloud_storage #apache_parquet #python
  11. :rss: DevelopersIO @[email protected] ·

    Cloud Storage 上の Parquet ファイルのスキーマ情報をメタデータのみで取得する
    dev.classmethod.jp/articles/gc

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage #Apache_Parquet #Python

    #dev_classmethod #google_cloud_gcp #google_cloud_storage #apache_parquet #python
  12. :rss: DevelopersIO @[email protected] ·

    Cloud Storage 上の Parquet ファイルのスキーマ情報をメタデータのみで取得する
    dev.classmethod.jp/articles/gc

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage #Apache_Parquet #Python

    #dev_classmethod #google_cloud_gcp #google_cloud_storage #apache_parquet #python
  13. :rss: DevelopersIO @[email protected] ·

    Cloud Storage 上の Parquet ファイルのスキーマ情報をメタデータのみで取得する
    dev.classmethod.jp/articles/gc

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage #Apache_Parquet #Python

    #python #apache_parquet #google_cloud_storage #google_cloud_gcp #dev_classmethod
  14. :rss: DevelopersIO @[email protected] ·

    Cloud Storage 上の Parquet ファイルのスキーマ情報をメタデータのみで取得する
    dev.classmethod.jp/articles/gc

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage #Apache_Parquet #Python

    #dev_classmethod #google_cloud_gcp #google_cloud_storage #apache_parquet #python
  15. :rss: DevelopersIO @[email protected] ·

    Cloud Storage上の大量のオブジェクトをバッチリクエストでコピーしてみた
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_cloud_storage
  16. :rss: DevelopersIO @[email protected] ·

    BigQuery で Parquet と CSV を比較してみる
    dev.classmethod.jp/articles/bi

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Google_Cloud_Storage #Apache_Parquet #CSV

    #dev_classmethod #google_cloud_gcp #google_bigquery #google_cloud_storage #apache_parquet #csv
  17. :rss: DevelopersIO @[email protected] ·

    BigQuery で Parquet と CSV を比較してみる
    dev.classmethod.jp/articles/bi

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Google_Cloud_Storage #Apache_Parquet #CSV

    #dev_classmethod #google_cloud_gcp #google_bigquery #google_cloud_storage #apache_parquet #csv
  18. :rss: DevelopersIO @[email protected] ·

    Cloud Storage上の大量のオブジェクトを並行処理でコピーしてみた
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_cloud_storage
  19. :rss: DevelopersIO @[email protected] ·

    Cloud Storage上の大量のオブジェクトをバッチリクエストで削除してみた
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_cloud_storage
  20. :rss: DevelopersIO @[email protected] ·

    BigQuery の BigLake テーブルと Hive パーティショニングを利用して無駄なファイルの読み込みを避けてみた
    dev.classmethod.jp/articles/bi

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Google_Cloud_Storage #Hive

    #dev_classmethod #google_cloud_gcp #google_bigquery #google_cloud_storage #hive
  21. :rss: DevelopersIO @[email protected] ·

    BigQuery で Cloud Storage データの自動検出を試してみた（Preview） #cm_google_cloud_adcal_2024
    dev.classmethod.jp/articles/bi

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Google_Cloud_Storage #Google_Dataplex

    #cm_google_cloud_adcal_2024 #dev_classmethod #google_cloud_gcp #google_bigquery #google_cloud_storage #google_dataplex
  22. :rss: DevelopersIO @[email protected] ·

    BigQuery で Cloud Storage データの自動検出を試してみた（Preview） #cm_google_cloud_adcal_2024
    dev.classmethod.jp/articles/bi

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Google_Cloud_Storage #Google_Dataplex

    #cm_google_cloud_adcal_2024 #dev_classmethod #google_cloud_gcp #google_bigquery #google_cloud_storage #google_dataplex
  23. :rss: DevelopersIO @[email protected] ·

    BigQuery で JSON Lines ではないカンマ区切りの JSON 形式をそのまま読み込む裏技
    dev.classmethod.jp/articles/gc

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Google_Cloud_Storage #JSON

    #dev_classmethod #google_cloud_gcp #google_bigquery #google_cloud_storage #json
  24. :rss: DevelopersIO @[email protected] ·

    Google Cloud Storageのバケットソフト削除を試してみる
    dev.classmethod.jp/articles/go

    #dev_classmethod #Google_Cloud_Storage #Google_Cloud_GCP

    #dev_classmethod #google_cloud_storage #google_cloud_gcp
  25. :rss: DevelopersIO @[email protected] ·

    Google Cloud StorageのバケットIPフィルタリングを試してみる
    dev.classmethod.jp/articles/go

    #dev_classmethod #Google_Cloud_Storage #Google_Cloud_GCP

    #dev_classmethod #google_cloud_storage #google_cloud_gcp
  26. :rss: DevelopersIO @[email protected] ·

    GCS ファイルのカスタムメタデータでバッチの処理ステータスを管理してみた。
    dev.classmethod.jp/articles/gc

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_cloud_storage
  27. :rss: DevelopersIO @[email protected] ·

    Google Cloud の Workflows で Batch を呼び出してみた
    dev.classmethod.jp/articles/go

    #dev_classmethod #Google_Cloud_GCP #google_cloud_Workflows #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_cloud_workflows #google_cloud_storage
  28. :rss: DevelopersIO @[email protected] ·

    Google Cloud Batch のジョブで Cloud Storage にマウントされたスクリプトを実行してみた
    dev.classmethod.jp/articles/go

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_cloud_storage
  29. :rss: DevelopersIO @[email protected] ·

    Google Cloud Storageのクロスバケットレプリケーションを試してみる
    dev.classmethod.jp/articles/go

    #dev_classmethod #Google_Cloud_Storage #Google_Cloud_GCP

    #dev_classmethod #google_cloud_storage #google_cloud_gcp
  30. :rss: DevelopersIO @[email protected] ·

    transfer_manager で GCS へのファイルアップロードが高速化できるか確認してみた。
    dev.classmethod.jp/articles/tr

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage #Python

    #dev_classmethod #google_cloud_gcp #google_cloud_storage #python
  31. :rss: DevelopersIO @[email protected] ·

    Cloud Composer で Dataplex のデータリネージ統合を試してみた　〜カスタム リネージ イベント編〜
    dev.classmethod.jp/articles/cl

    #dev_classmethod #Google_Cloud_GCP #Cloud_Composer #BigQuery #Google_Cloud_Storage #Apache_Airflow

    #dev_classmethod #google_cloud_gcp #cloud_composer #bigquery #google_cloud_storage #apache_airflow
  32. :rss: DevelopersIO @[email protected] ·

    Cloud Composer で Dataplex のデータリネージ統合を試してみた
    dev.classmethod.jp/articles/cl

    #dev_classmethod #Google_Cloud_GCP #Cloud_Composer #BigQuery #Google_Cloud_Storage #Storage_Transfer_Service #Apache_Airflow

    #dev_classmethod #google_cloud_gcp #cloud_composer #bigquery #google_cloud_storage #storage_transfer_service
  33. :rss: DevelopersIO @[email protected] ·

    Cloud Composer で Dataplex のデータリネージ統合を試してみた
    dev.classmethod.jp/articles/cl

    #dev_classmethod #Google_Cloud_GCP #Cloud_Composer #BigQuery #Google_Cloud_Storage #Storage_Transfer_Service #Apache_Airflow

    #dev_classmethod #google_cloud_gcp #cloud_composer #bigquery #google_cloud_storage #storage_transfer_service
  34. :rss: DevelopersIO @[email protected] ·

    【初心者歓迎】Google Cloud 基本概念と全体像を学ぼう
    dev.classmethod.jp/articles/go

    #dev_classmethod #Google_Cloud_GCP #Google_BigQuery #Google_Cloud_Storage #Cloud_Run #初心者

    #dev_classmethod #google_cloud_gcp #google_bigquery #google_cloud_storage #cloud_run #初心者
  35. :rss: DevelopersIO @[email protected] ·

    Cloud Storageにオブジェクトが置かれたらAmazon S3に転送するCloud Run FunctionsをPythonで書いた [Google Cloud --> AWS]
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Functions #Google_Cloud_Storage #Amazon_S3 #Python #Google_Cloud_SDK #Boto3

    #dev_classmethod #google_cloud_gcp #google_cloud_functions #google_cloud_storage #amazon_s3 #python
  36. :rss: DevelopersIO @[email protected] ·

    Cloud Storageにオブジェクトが置かれたらAmazon S3に転送するCloud Run FunctionsをPythonで書いた [Google Cloud --> AWS]
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Functions #Google_Cloud_Storage #Amazon_S3 #Python #Google_Cloud_SDK #Boto3

    #dev_classmethod #google_cloud_gcp #google_cloud_functions #google_cloud_storage #amazon_s3 #python
  37. :rss: DevelopersIO @[email protected] ·

    Cloud Storageにオブジェクトが置かれたらAmazon S3に転送するCloud Run FunctionsをPythonで書いた [Google Cloud --> AWS]
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Functions #Google_Cloud_Storage #Amazon_S3 #Python #Google_Cloud_SDK #Boto3

    #dev_classmethod #google_cloud_gcp #google_cloud_functions #google_cloud_storage #amazon_s3 #python
  38. :rss: DevelopersIO @[email protected] ·

    Cloud Storageにオブジェクトが置かれたらAmazon S3に転送するCloud Run FunctionsをPythonで書いた [Google Cloud --> AWS]
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Functions #Google_Cloud_Storage #Amazon_S3 #Python #Google_Cloud_SDK #Boto3

    #boto3 #google_cloud_sdk #python #amazon_s3 #google_cloud_storage #google_cloud_functions
  39. :rss: DevelopersIO @[email protected] ·

    Cloud Storageにオブジェクトが置かれたらAmazon S3に転送するCloud Run FunctionsをPythonで書いた [Google Cloud --> AWS]
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Functions #Google_Cloud_Storage #Amazon_S3 #Python #Google_Cloud_SDK #Boto3

    #dev_classmethod #google_cloud_gcp #google_cloud_functions #google_cloud_storage #amazon_s3 #python
  40. :rss: DevelopersIO @[email protected] ·

    [組織ポリシー]Soft Deleteの保持期間などを設定できる組織ポリシーを試してみた
    dev.classmethod.jp/articles/20

    #dev_classmethod #Google_Cloud_GCP #Google_Cloud_Storage

    #dev_classmethod #google_cloud_gcp #google_cloud_storage
  41. :rss: DevelopersIO @[email protected] ·

    Storage Transfer ServiceにAmazon S3からのデータ転送をより安くするオプションが追加されました
    dev.classmethod.jp/articles/gc

    #dev_classmethod #Google_Cloud_GCP #Storage_Transfer_Service #Google_Cloud_Storage #Amazon_S3

    #dev_classmethod #google_cloud_gcp #storage_transfer_service #google_cloud_storage #amazon_s3