| 仕事内容 |
【案件名】
エンド企業内におけるデータパイプライン構築
【業務概要】
印刷系のECサイトを運営されているメガベンチャー企業のデータ移行チームにて、
クラウド基盤の構築/運用やDWHへのデータパイプライン構築などをご担当いただきます。
想定される業務内容:
・各種システムからのBigQueryへのデータパイプラインの構築/運用
・BigQuery上のデータウェアハウス、データマートの加工処理の構築/運用
・既存システムから新システムへのデータ移行
【開発環境】
・言語:Python
・データベース:BigQuqery, Aurora MySQL 2.0/3.0, Aurora PostgreSQL
・インフラ:GCP, AWS (EC2, S3, Lambda etc)
・データパイプライン実行制御: dagster
・バージョン管理 : Github
・CI : GitHub Actions
【備考】
・時期:12月or1月~
・場所:目黒
・リモート頻度:フルリモート
※MTGや打合せの出席だけはお願いします。
・地方:可
・募集人数:1名
・PC貸与:アリ(Mac) |