【オーロラ株式会社】【在宅相談可】データエンジニア（Databricksスペシャリスト）◆完全週休2日／土日祝休【転職支援サービス求人】（正社員）

掲載予定期間：2026/7/9(木)〜2026/10/7(水)


【在宅相談可】データエンジニア（Databricksスペシャリスト）◆完全週休2日／土日祝休


◇Databricks環境での実装に留まらず、PySparkによる大規模データ処理の最適化やDelta Lake設計もお任せ／「クラウド＋Spark＋Lakehouse（Delta Lake）」のセットを経験可能／大規模データ処理・パフォーマンスチューニングに深く関わる◇

■業務概要
Databricksを中核としたデータプラットフォームの設計・開発・最適化を一気通貫で担当いただきます。

■求める人物像
・Databricksを「ツールとして使う」ではなく「最適設計できる」方
・分散処理の特性を理解し、処理効率を改善できる方
・Notebookレベルで完結せず、運用を見据えた設計ができる方
・データ量増加に耐えるスケーラブルな設計ができる方
・ログや実行計画からボトルネックを特定できる方

■職務詳細
・Databricksによるデータパイプライン（ETL / ELT）の設計・開発
・PySparkを用いた分散データ処理の実装・最適化
・Delta Lakeを用いたデータレイク設計・運用
・Databricks Workflowsによるジョブ設計・スケジューリング
・Notebookベースでのデータ処理開発・検証
・データ変換ロジック（配列処理・集計・結合）の実装
・大規模データ処理におけるパフォーマンスチューニング
・データ品質管理（バリデーション・例外処理設計）

■技術スタック
プラットフォーム：Databricks
処理基盤：Apache Spark（PySpark）
ストレージ：Delta Lake
開発：Notebook / Jobs / Workflows
言語：Python / SQL
※クラウド（AWS / Azure / GCP）は実行基盤として利用

■評価制度
客先常駐の働き方ではありますが、協力ベンダーなどから普段の業務状況などのフィードバックも取り入れることで、納得感・透明性の高い評価実施を大切にしています。

■組織構成
「計6名」
・CEO　30代後半
∟ITコンサルタント、ITアーキテクト、エンジニア（上流）を中心に担当
・エンジニア　20代2名・30代2名
∟詳細設計～開発～テスト～リリースまでを中心に担当
・営業担当　2名

変更の範囲：会社の定める業務

【チーム／組織構成】