Job offer curation - ⁨Spark⁩

データエンジニアとして、データパイプラインとデータウェアハウスの構築、BI分析環境の整備を行います。ビジネスチームと協力してデータ収集要件を定義し、新たな収益サービスの創出に取り組みます。機械学習フレームワークを活用し、大規模データの分析と活用を通じて、楽天カードのサービス向上に貢献します。

データエンジニアリングマネージャーは、データメッシュの原則に基づくデータ基盤のシステムアーキテクチャ設計・開発を行います。Databricks、Airflow、AWS Glueを利用したデータパイプライン開発や、Apache SparkによるETL処理の開発、各サービス開発チームのデータエンジニアリング支援が主な業務となります。

医療領域における薬局⇔患者コミュニケーションプラットフォームのバックエンド開発を担当します。システムの設計、機能開発、パフォーマンス最適化、セキュリティ確保など、プロダクトの根幹を支える技術的な業務を遂行します。プロダクトマネージャーと協働しながら、革新的なソリューション創出に挑戦します。

データエンジニアは、対話システムのデータ分析基盤構築を担当します。対話データの収集、クレンジング、変換、ETL/ELTパイプラインの設計・運用、データワークフローの自動化、分散処理フレームワークを活用したデータ処理基盤の構築などを行います。クラウド環境でのスケーラブルなデータエンジニアリングインフラ構築と、データ品質管理が主な業務となります。