【楽天グループ株式会社】ビジネスサポート開発部　ビジネスデータソリューショングループ：データエンジニア（BSD）（正社員）

【部署・サービス】
ビジネスサポート開発部は、楽天市場の店舗向けRMS（ASP）の一部と、楽天市場運営を支える社内向けアプリの開発・運用を担います。ECビジネスデータアナリティクス&プラットフォーム課は、出店約5万・商品約3億・年流通額3兆円超のトランザクションデータを支えるデータ基盤を構築し、意思決定とデータ活用を支援します。

【募集背景】
B2B/B2Cサービス拡充に伴い、Hadoop/GCPを基盤にPython・Spark・Kafka等で処理するデータパイプラインの拡張・最適化を推進するデータエンジニア（リード）を募集。運用効率化とコスト削減も含め、高品質なデータ基盤を牽引します。

【業務内容】
・Spark/Hive/Kafka/Spark Streaming/Hadoop/GCP等を用いた大規模バッチパイプライン構築
・データチェックや主要KPI等、意思決定データの提供
・パイプラインの構築・維持、データ取り込み自動化
・オンプレ基盤のGCP移行、アプリ管理
・データストレージ/取得の課題解決、説明
・本番デバッグ/保守（ログ、アラート、監視）
・他チーム連携、エンジニアチームのリード、PJ管理

【技術環境】
Python／Hadoop／Hive／Spark／Kafka／Google Cloud Platform

※業務は発令等により会社の定める範囲で変更となる可能性があります（出向時は出向先業務）。