【データ基盤エンジニア】Databricks×Azure／大規模データ処理最適化／商用車ロジスティクス領域／リモート併用

■仕事内容
トラック製造販売メーカー向け
商用車ロジスティクス可視化基盤のデータ処理最適化プロジェクトにて、
Databricksを中心としたデータ処理基盤のパフォーマンス改善をご担当いただきます。

車両から発信される膨大なGPSログをリアルタイムに近い形で可視化するため、
既存の大規模データ処理基盤に対するチューニング・改善実装が主なミッションとなります。

既存メンバーとチームを組み、技術検討・実装・改善提案を行いながらプロジェクトを推進していただく想定です。

― 既存データ処理基盤の調査・分析
― Databricks（PySpark／Scala）を用いた処理の最適化
― 大規模データ処理ロジックの実装・改修
― Azureデータ基盤全体のパフォーマンス改善
― リファクタリング、保守・構成管理

■プロジェクト例
商用車（トラック）の輸送状況をリアルタイムに可視化することで、
物流の効率化・業務改善を支える社会的意義の高いデータ基盤の構築・改善に携わっていただきます。

■主な使用技術
・Databricks（PySpark、Scala）
・Apache Spark
・Azure
（Data Factory、SQL Server、SQL Database、Databricks、Functions、Azure DevOps など）

社内では他にも
Java、C#、PHP（Laravel）、TypeScript、AWS など幅広い技術を利用しており、
データ基盤以外の技術に触れる機会もあります。
新しい技術を学びながらスキルの幅を広げられる環境です。

■業務内容の変更範囲
・雇入時：データ基盤・システム開発関連業務
・変更範囲：会社の定める業務

■仕事を進める上で重要となるスキル
大量データを前提とした処理設計や、
「なぜ遅いのか」「どこを改善すべきか」を技術的に考え、
最適な解決策を導き出す力を身につけていくことを重視しています。

すべてを最初から完璧に求めるわけではなく、
プロジェクトを通してスキルを高めていける環境です。

■目指せるキャリアパス（5年後、10年後のキャリア）
① データ基盤スペシャリスト／アーキテクト
　大規模データ処理・クラウドデータ基盤の設計・最適化を担う技術スペシャリストとして活躍できます。

② テックリード／技術責任者
　プロジェクト全体の技術方針策定やレビューを担い、技術面からチームを牽引するポジションを目指せます。

③ PM／PMO
　データ基盤案件の進行管理や品質管理、技術とビジネスの橋渡し役としてプロジェクトマネジメントに関わるキャリアも選択可能です。