クラウドエンジニア
マップボックス・ジャパン合同会社
-
11 to 100
-
Company Homepage
Job Summary
データプラットフォームチームにおけるソフトウェア開発エンジニアとして、内部のデータインフラ、ツール、パイプラインの構築と改善に従事します。AWS上でのデータ処理システムの設計、デプロイ、モニタリングを行い、大量のデータ処理とクラスター管理を担当します。Company Info
Duties
Mapboxのデータプラットフォームチームにおいて、大規模なデータインフラストラクチャの設計、構築、運用を担当します。毎日1000以上のEMRクラスターの管理、ペタバイト規模のデータレイクの拡張、40億件のGPSポイントを処理するイベント取り込みパイプラインの運用を行います。AWS環境でのNode.js、Python、Scala、Spark、Airflowを活用し、内部エンジニアのニーズに応える高品質なデータツールとサービスを開発します。分散システムの設計、モニタリング、トラブルシューティングを通じて、データ処理と分析の基盤を強化し、組織全体のデータ活用を支援する重要な役割を担います。
Login to see all information about offers.
By registering with LabBase Plus you...
You can select from our vast stock of job offers.
- Can view all curation offers.
- Receive notifications of new offers added to curations.
- Possibly be scouted by corporations.
- Search for companies with unique technologies.
- Search for job offers in areas like inorganic chemistry material science.
Registration takes roughly 2 minutes