パイプライン設計・開発

パイプライン設計・開発

【パイプライン入門】GitHub Actionsを用いたCI/CD環境の構築

GitHub Actionsを用いてCI/CDの実装を行いました.CI/CD,Git,GitHub Actionsの説明を行った後,実際にGitHub Actionsを使って流れを解説しています.初学者にもわかりやすいように多くの図を用いて説明しています.
データINPUT

【クラウド基盤準備編】IaC・CI/CDによる開発・運用環境の効率化

今回同時に用いられることの多いIaCとCI/CDの概要を、実際のユースケースも交えて記事にまとめています。IaC・CI/CDは少し学習コストがかかりますが、開発効率を上げて中長期的に大きな効果が得られる技術なので、初心者の方含めまだ利用したことがない方はぜひ利用してみていただけると幸いです。
データINPUT

【クラウド基盤準備編】Gitによるコードの管理の高度化

Gitの情報はネット上に多く存在しますがイメージを掴みにくく、今回は実際の使い方より概念や運用例に比重をおいて書かせていただきました。Gitを使い始める際の参考にしていただけると幸いです。
データINPUT

【データパイプライン設計】AWSサービスからBQへのデータ連携例

Amazon RDSやAmazon DynamoDBなどAWSのDBからAmazon S3への継続的なデータ連携パイプラインの設計について紹介しています。設計だけでなく実際の設定方法も記載しているので、パイプライン開発時の参考にしていただけると幸いです。
データINPUT

【データパイプライン入門】BigQuery Data Transfer Serviceを用いたAmazon S3からBigQueryへのデータ連携

Amazon S3のデータをBigQueryのテーブルに連携する方法について、設計だけではなく実際の設定方法も踏まえて説明させていただいています。BigQuery Data Transfer Serviceはマネージド・サービスのため導入がしやすく、パイプライン開発時の参考にしていただけると幸いです。
データINPUT

【データパイプライン入門】Google SheetsのデータをBigQueryに連携する方法

spread sheetをBigQueryのテーブルとして取り込む手法について詳しく解説しています。
タイトルとURLをコピーしました