入門 【データ加工入門】dbtを用いたBigQueryにおけるデータマートの作成 dbtはELTにおける(Transform)部分を担当するツールであり、Amazon RedshiftやGoogle BigQueryなどのクラウドDBに接続することでマートの作成処理等を行うことができます。dbtの特徴やサンプルで利用してみた感想をまとめているので、もしよろしければ参考にしてみてください。 2022.12.12 入門加工
データ準備・作成 【データ準備入門】Cloud Functionsを用いたデータ準備・作成 データの準備において柔軟な連携が必要となった場合に使い勝手の良いCloudFunctionsの注意点などについてまとめました。いくつか実際のサンプルコードも載せていますので、興味がある方は是非参考にしてみてください。 2022.12.11 データ準備・作成入門全体
入門 【データ分析入門】BigQuery MLを用いた時系列分析例 時系列分析ができるBigQuery MLを用いた時系列分析の手法について説明しています。手軽に時系列分析が行えるサービスとなっているため、時系列分析の初期導入時にご利用していただけると幸いです。 2022.11.12 入門可視化・モデリング
データINPUT 【クラウド基盤準備編】IaC・CI/CDによる開発・運用環境の効率化 今回同時に用いられることの多いIaCとCI/CDの概要を、実際のユースケースも交えて記事にまとめています。IaC・CI/CDは少し学習コストがかかりますが、開発効率を上げて中長期的に大きな効果が得られる技術なので、初心者の方含めまだ利用したことがない方はぜひ利用してみていただけると幸いです。 2022.09.13 データINPUTパイプライン設計・開発入門全体
データINPUT 【クラウド基盤準備編】Gitによるコードの管理の高度化 Gitの情報はネット上に多く存在しますがイメージを掴みにくく、今回は実際の使い方より概念や運用例に比重をおいて書かせていただきました。Gitを使い始める際の参考にしていただけると幸いです。 2022.06.13 データINPUTパイプライン設計・開発入門全体
入門 【準備編】「データのお仕事」は具体的にどのようなことをするのか データに関するお仕事についてなぜ重要であるかと具体的にどういった内容であるかを説明させていただいています。データ分析などに興味があり今後始めてみたいと思っている方は、実際の業務がどのようなものか想像する際に参考にしていただけると幸いです。 2022.05.14 入門全体