【デジタルテクノロジー戦略本部】事業部横断データエンジニア（上流から実装まで一気通貫で担当）

＜仕事概要＞

◆データ基盤のモダナイズ
当社のデータ基盤の構築・運用やデータ基盤・データ利活用環境を最新テクノロジーを利用した構造へと変革するモダナイゼーションなどを目的とした上流工程から、プログラミングやクラウドインフラ構築などの開発工程も行う内製主体のデータエンジニアリング業務を行います。

◆ビジネスサイドへのデータの活用・分析環境の提供
サービスサイトのデータやERPなどの社内基幹システムのデータを掛け合わせ、BIツールやダッシュボードなどをビジネスサイドへ提供します。
そのためにビジネスサイドとの要求分析・要件定義から始まり、データ連携の設計、データ加工パイプラインの設計、開発、テスト、運用などデータライフサイクル全体に直接かかわる業務を担当頂きます。

＜業務詳細＞
現在、当社社内にはいくつかのデータ基盤が存在しており、それぞれが個々に運用されている状態です。このような状態のため、横断的なデータ活用への障壁になっている状態です。
これらを1カ所のデータ基盤に統合することで、データガバナンスの向上やデータマネジメントの効率化を行っていきたいと考えています。
まずは、いくつかあるデータ基盤のうち、オンプレミスで稼働中のデータ基盤を対象に、Snowflakeとdbtを使ったクラウドデータウェアハウスに作り替えることを内製で構築検証をしています。このようなSnowflakeとdbtを用いたデータ基盤へ作り替える開発業務に携わっていただきます。

また、今後は以下のようなことも構想しています。

・他のデータ基盤とのデータ統合を進める
・現状のデータ基盤に関する定常作業を削減・低減できるような方法に刷新し、運用負荷を減らす(自動化やCI/CD/IaC化など)
・dbtやOpenMetadataなどを用いたデータカタログの充実化
・Python等を用いてデータ基盤のデータを観察・分析することで、
システム部門発信でのデータ利活用やデータシステムを当社のビジネスサイドへ提案・提供する
・その他、データ利活用が促進できるような様々な施策

上記のように新しく拡大していくような業務もありますが、それ以外にデータ基盤の定常運用作業もあります。このような定常運用業務をいかに自動化などの工夫をしながら効率化し、クリエイティブな仕事の比率を上げていけるかという点にも重点を置いています。

■プログラミング言語・開発環境
・Python
・SQL(dbt & Snowflake)
・Git/Github
・Terraform
・Docker
・AWS (今後の状況により、EC2/S3/MWAA/Fargate/Batch/App Runner/ECSなどを利用する可能性が高いです)

■SQLを利用した実務経験2年以上　※下記歓迎する経験・スキルをお持ちの方であれば1年程度でも可
■プログラミング、クラウド、データ分析・利活用への強い興味・関心
【歓迎/尚可】
※一部でも該当する方はぜひご応募ください
■Python経験1年以上（自学含む）
または何らかのプログラミング言語経験3年以上
■Gitを利用したシステム開発経験
※自学含む。チームでの並行開発経験がある方も歓迎
■AWS / GCP / Azureなどクラウドを利用したシステム開発経験

＜あると活かせるご経験・スキル＞
■SnowflakeもしくはBigQueryの利用経験
■dbtを利用したデータパイプライン構築・運用経験
■統計、数理最適化、機械学習などの数学を利用したシステム開発経験
■データベース・SQLのパフォーマンスチューニング、プログラムの高速化経験
■KVS等のNoSQLデータストアの利用経験
■データベースやデータストアの製品選定やアーキテクチャ設計の経験

土日祝休み(完全週休2日制)
休日：完全週休2日制（土曜日・日曜日）、祝日、年末年始休日、当社公休日（年5日）　※年間休日129日（2023年10月1日～2024年9月30日実績）
休暇：年次有給休暇、特別休暇（結婚休暇、忌引休暇、子の看護休暇、介護休暇等）