| 業務内容 |
◆GOのデータ基盤では、3,500万ダウンロードのタクシーアプリ『GO』のデータなど1日に10億レコード規模の データを収集し、活用しています。データの主な活用方法は二つあります。一つはデータプロダクトの開発であり、データをもとに AIや高度なアルゴリズムを開発しタクシーアプリ『GO』に機能として組み込んでいます。もう一つは意思決定支援であり 約30名のデータアナリストやデータサイエンティストがデータ分析し、その結果を元にビジネス担当やプロダクトマネージャが プロジェクトの効果測定や意思決定をしています。本ポジションは、このデータ基盤を支えるデータエンジニアです。
【業務詳細】データ基盤とデータプロダクトの実行基盤を担当いただきます。 ◆データ基盤 ・大規模な車両データをDataflow等を用いてBigQueryに収集 ・3,500万ダウンロードのアプリケーションのDBとログのデータをBigQueryに収集 ・地図を始めとした外部データをデータ基盤に収集 ・データ加工バッチの開発・運用 ・Google Cloudの様々なサービスを用いて実現 ・StreamlitやLookerなど分析ツールのホスティング ・100人規模の利用者の管理、セキュリティコントロール ◆データプロダクト実行基盤 ・タクシーアプリ『GO』でAIや高度な ・アルゴリズムを用いたデータプロダクトの実行基盤を設計・開発・運用 ・データサイエンティストの開発支援 ・AIモデルの学習バッチや、本番での推論サービング ・高性能かつ高可用性を担保するための設計・実装・システム運用 ・24/365のオンコール体制(待機なし・システム障害時に当番順にコールがあり対応)
◆GOのデータ基盤では、3,500万ダウンロードのタクシーアプリ『GO』のデータなど1日に10億レコード規模のデータを収集し、活用しています。データの主な活用方法は二つあります。一つはデータプロダクトの開発であり、データをもとにAIや高度なアルゴリズムを開発しタクシーアプリ『GO』に機能として組み込んでいます。もう一つは意思決定支援であり約30名のデータアナリストやデータサイエンティストがデータ分析し、その結果を元にビジネス担当やプロダクトマネージャがプロジェクトの効果測定や意思決定をしています。本ポジションは、このデータ基盤を支えるデータエンジニアです。
【業務詳細】 データ基盤とデータプロダクトの実行基盤を担当いただきます。
◆データ基盤 ・大規模な車両データをDataflow等を用いてBigQueryに収集 ・3,500万ダウンロードのアプリケーションのDBとログのデータをBigQueryに収集 ・地図を始めとした外部データをデータ基盤に収集 ・データ加工バッチの開発・運用 ・Google Cloudの様々なサービスを用いて実現 ・StreamlitやLookerなど分析ツールのホスティング ・100人規模の利用者の管理、セキュリティコントロール
◆データプロダクト実行基盤 ・タクシーアプリ『GO』でAIや高度なアルゴリズムを用いたデータプロダクトの実行基盤を設計・開発・運用 ・データサイエンティストの開発支援 ・AIモデルの学習バッチや、本番での推論サービング ・高性能かつ高可用性を担保するための設計・実装・システム運用 ・24/365のオンコール体制(待機なし・システム障害時に当番順にコールがあり対応)
変更の範囲:有
会社が指定する業務全般
|
| 必要な経験 |
◆以下をすべて満たす方 ◎以下の経験を3年以上 ・商用システムの本番運用、障害対応 ・RDBMSを用いた開発 ・GO言語もしくはPythonでの開発 ・ジョブコントローラー(Airflowなど)を用いたバッチ開発 ・Google CloudもしくはAWSでの開発 ・LinuxもしくはDockerでの開発 ・Gitを用いたPRベースの開発 ◎以下の経験を1年以上 ・Webアプリ、APIなど常駐プロセスの開発経験 ・パフォーマンス問題の対応経験。CPU、メモリ IO、ネットワークなどのボトルネックを特定できること ・他人のコードレビュー ◎3名以上のリード ◎システムの課題を自ら発見し、解決した経験 ◎日本語ネイティブレベル、またはビジネスレベルの日本語力
|
◆以下をすべて満たす方
◎以下の経験を3年以上 ・商用システムの本番運用、障害対応 ・RDBMSを用いた開発 ・GO言語もしくはPythonでの開発 ・ジョブコントローラー(Airflowなど)を用いたバッチ開発 ・Google CloudもしくはAWSでの開発 ・LinuxもしくはDockerでの開発 ・Gitを用いたPRベースの開発
◎以下の経験を1年以上 ・Webアプリ、APIなど常駐プロセスの開発経験 ・パフォーマンス問題の対応経験。CPU、メモリIO、ネットワークなどのボトルネックを特定できること ・他人のコードレビュー
◎3名以上のリード
◎システムの課題を自ら発見し、解決した経験
◎日本語ネイティブレベル、またはビジネスレベルの日本語力
|
| 求人の特色 |
|