◆本ポジションは、全社データ基盤のデータエンジニアです。必要なデータを社内外から収集し、データ基盤に蓄積。 活用のニーズにもとづいてデータモデリングしたり、分析ツールを提供することで、全社のデータ活用を支援します。
【業務詳細】■データの生成・収集 分析に必要なデータをアプリケーションログに出力させるための設計。ログの出力、ログの収集 ユーザの端末や車載デバイスからデータ収集 / 業務データベースからのデータ収集 / 社外からのデータ収集 ■データの蓄積 全社データ基盤であるGoogle CloudのBigQueryに蓄積。管理。 ■データマートの作成 分析の要件に応じたデータモデリング。データマートの作成 BIツールLookerのセマンティックレイヤーである「LookML」の開発 Google CloudのdataformやAirflow(Cloud Composer)などを活用してデータ加工パイプライン構築 データマートやセマンティックレイヤーの本番運用。データ品質のモニタリング。 ■データ活用のための活動 データ活用のための分析ツール(LookerやStreamlitなど)の提供 / メタデータ整備 / データガバナンスのための利用ルールの策定
◆本ポジションは、全社データ基盤のデータエンジニアです。 必要なデータを社内外から収集し、データ基盤に蓄積。 活用のニーズにもとづいてデータモデリングしたり、分析ツールを提供することで、全社のデータ活用を支援します。
【業務詳細】 ■データの生成・収集 ・分析に必要なデータをアプリケーションログに出力させるための設計。ログの出力、ログの収集 ・ユーザの端末や車載デバイスからデータ収集 ・業務データベースからのデータ収集 ・社外からのデータ収集
■データの蓄積 ・全社データ基盤であるGoogle CloudのBigQueryに蓄積。管理。
■データマートの作成 ・分析の要件に応じたデータモデリング。データマートの作成 ・BIツールLookerのセマンティックレイヤーである「LookML」の開発 ・Google CloudのdataformやAirflow(Cloud Composer)などを活用してデータ加工パイプライン構築 ・データマートやセマンティックレイヤーの本番運用。データ品質のモニタリング。
■データ活用のための活動 ・データ活用のための分析ツール(LookerやStreamlitなど)の提供 ・メタデータ整備 ・データガバナンスのための利用ルールの策定
変更の範囲:有
会社の定める業務
|