データエンジニア

データエンジニアは、対話システムの複雑な環境において、高度なデータ処理と分析基盤の構築を担当します。主な業務は、対話データ（音声、動画、テキスト、ログ）の収集、クレンジング、変換を行い、ETL/ELTパイプラインの設計・構築・運用を実施します。さらに、データワークフローの自動化、分散処理フレームワークを活用したデータ処理基盤の構築、データ品質向上のためのモニタリングとアラート設定を行います。クラウド環境（GCP）でのスケーラブルなデータエンジニアリングインフラの構築と自動化、ユーザー行動やシステムパフォーマンス分析を支えるBIツールの統合と最適化も重要な役割となります。

・自動化されたデータパイプライン（ETL/ELT）の設計・構築・運用経験 ・GCPまたはその他のクラウド環境でのデータ処理基盤の構築経験 ・PythonやScalaを用いたデータ処理スクリプトの作成・運用経験 ・データ品質管理およびモニタリングツールの使用経験

・Terraformを用いたインフラの自動構築の経験 ・分散処理フレームワーク（Apache Spark、Hadoop、Apache Beam）の使用経験 ・dbtを用いたデータパイプラインの構築 ・データウェアハウス（Snowflake、BigQuery）の構築・運用経験 ・SQLやおよびNoSQLデータベースにおける設計・管理パフォーマンスチューニングの経験 ・BIツール（Power BI、Looker、Metabase）の活用経験、あるいはOSS（Redash、Lightdash）を用いたBIツールの構築経験 ・英語での業務経験または英会話スキル