Job offer curation - ⁨分散処理⁩

研究領域のデータ収集と分析基盤の構築を担当し、主にWebスクレイピングとデータパイプラインの開発に従事します。Rustを用いて、高性能で効率的なデータ収集システムを設計・実装し、スクレイピングの精度向上とパフォーマンス最適化に取り組みます。ヘッドレスブラウザの活用、分散処理技術の導入、ブロック対策の実装など、複雑なデータ収集課題に対して技術的な解決策を提案・実行します。また、収集したデータの整理、クレンジング、Amazon DynamoDBやMySQLでのデータ管理も行い、研究者や企業の課題解決に貢献するデータ基盤の構築を目指します。

リードエンジニアとして、プロダクト開発をリードし、チームの進捗管理と品質向上を担います。最新の技術トレンドを把握し、開発プロセスの改善を行います。若手エンジニアの成長をサポートし、チームの技術力を高めながら、革新的なマーケティングツールの開発に従事します。

データエンジニアとして、サービス関連事象のデータ化、分散処理、データベース設計、BI システム開発・運用を担当します。データマネジメント業務では、ドメインモデリング、データ設計、バッチ・ストリーム処理によるデータフロー設計と実装、外部システムやオープンデータの活用開発を行います。

AIリサーチエンジニアとして、新しい深層学習アルゴリズムの設計・開発・検証を行います。また、さまざまなプロジェクトで利用可能なライブラリの実装やアプリケーション開発、最新AI技術の調査、プロジェクト管理も担当します。多様な研究分野において、チームでの協力を通じて、AI技術の最前線での挑戦が求められます。