バックエンドエンジニア(スクレイピング)
株式会社LabBase
- MySQL
- GitHub
- AWS
- Docker
- TypeScript
- Kubernetes
- React
- Datadog
- Jira
- Rust
研究領域のデータ収集と分析基盤の構築を担当し、主にWebスクレイピングとデータパイプラインの開発に従事します。Rustを用いて、高性能で効率的なデータ収集システムを設計・実装し、スクレイピングの精度向上とパフォーマンス最適化に取り組みます。ヘッドレスブラウザの活用、分散処理技術の導入、ブロック対策の実装など、複雑なデータ収集課題に対して技術的な解決策を提案・実行します。また、収集したデータの整理、クレンジング、Amazon DynamoDBやMySQLでのデータ管理も行い、研究者や企業の課題解決に貢献するデータ基盤の構築を目指します。
-
¥700万 〜 1100万
-
東京都
-
101名〜1,000名