データエンジニア
楽天グループ株式会社
- Python
- SQL
- Linux
- BigQuery
- Spark
- Hadoop
- Google Cloud Platform
- Data processing
- Data modeling
- Hive
- Data Pipeline
- Kafka
- Data Migration
- Application management
- Spark-Streaming
- Data Ingestion
-
東京都
-
10,000名以上
-
企業ページ
■会社情報
楽天グループ株式会社は、70以上のサービスを展開し、共通の会員制度とロイヤリティプログラムを通じて、世界でもユニークで強固なエコシステムを構築しています。クラウドサービス部門は、アプリケーションチームに高品質なサービスを提供することを使命としており、コンテナオーケストレーションやデータベース、APIゲートウェイなどの管理サービスを提供しています。これにより、楽天グループの各ビジネスを支援しています。■仕事内容
データエンジニアとして、楽天市場の膨大な取引データを扱うデータパイプラインの拡張と最適化を担当します。HadoopやGoogle Cloud Platformを使用し、Python、Spark、Kafkaを駆使してデータ処理を行います。具体的には、大規模なバッチデータパイプラインの構築、データパイプラインの管理、自動化、クラウド移行、アプリケーション管理、複雑なデータストレージ問題の解決、プロダクション環境でのデバッグとメンテナンスを行い、チームをリードしてプロジェクト目標を達成します。■募集概要
データエンジニアとして、楽天市場の膨大な取引データを扱うデータパイプラインの拡張と最適化を担当します。具体的には、HadoopやGoogle Cloud Platformを使用して、大規模なバッチデータパイプラインを構築し、データ処理フレームワークや技術（Spark、Hive、Kafkaなど）を活用して、データの取り込みプロセスを自動化します。また、オンプレミスのデータインフラをGoogle Cloud Platformに移行し、アプリケーションの管理を行い、データのストレージや取得に関する複雑な問題を解決します。さらに、プロダクション環境でのデバッグやメンテナンスを行い、他のチームとの効果的なコラボレーションを図ります。チームリーダーとして、ソフトウェアエンジニアのチームを指導し、プロジェクトの目標達成に向けて取り組みます。登録すると生成AIが圧倒的に詳しくこの求人を解説します。
LabBase転職に登録すると...
- すべての求人が見放題
- 生成AIを活用した詳細な企業リサーチが可能
- 企業から面接やカジュアル面談のスカウトが届く
新規登録は簡単2分で登録完了します。