株式会社SiNCE 1日前 フォロー SiNCE 編集部 他5人 dbtを使った数値型カラムのDATE型変換とテーブル自動生成の手順 データパイプラインで、数値型カラムからDATE型へ変換し、常に最新の変換済みデータを持つテーブルを維持するシステム構築について、dbtでの実装方法を紹介します。続きはこちらから。 もっと見る
株式会社SiNCE 3日前 フォロー SiNCE 編集部 他5人 【最速レビュー】BigQueryデータ準備(Introduction to BigQuery data prepa... GoogleCloudの新機能である「BigQueryデータ準備(Introduction to BigQuery data preparation)」。この記事では、この機能を実際に試してみた... もっと見る
株式会社SiNCE 7日前 フォロー SiNCE 編集部 他5人 dbt seedを使ってSnowflakeへローカルデータをロードしてみよう データ分析基盤としてSnowflakeを使用している場合、dbtを使うことでデータパイプラインの構築がより簡単になります。dbt seedコマンドを利用してローカルのCSVファイルをSnowfl... もっと見る
株式会社SiNCE 約1ヶ月前 フォロー SiNCE 編集部 他5人 データパイプラインとは?その仕組みとビジネスへの活用方法 データパイプラインの概要、ビジネスでの利用方法、メリット・デメリットを解説します。データを効率的に処理し、業務の生産性を向上させる方法を学びましょう。続きはこちらから。 もっと見る
株式会社SiNCE 7ヶ月前 フォロー SiNCE 編集部 他5人 データパイプライン構築に役立つワークフロー管理ツールをまとめてみた データ分析やパイプライン構築の際の、オーケストレーションツールの重要性が高まっています。これらツールは、パイプライン構築と管理、データ分析のワークフローを自動化し、分析生産性を向上させることがで... もっと見る
株式会社SiNCE 約1年前 フォロー SiNCE 編集部 他5人 データパイプライン構築入門: FiveTranとBigQueryを接続する方法 FiveTranはデータ統合ツールであり、ELTプロセスの「E」、つまり抽出(Extraction)の部分を担当しています。今回はBigQueryを例にその接続方法の基本的な手順を解説していきま... もっと見る