バックエンドデータエンジニア

大規模分散システムにおいて、PythonベースのRESTful APIの設計、開発、メンテナンスを行います。Trino/Presto、Pinotを活用した堅牢なデータウェアハウスの構築と管理、Apache AirflowとApache Sparkを用いたデータパイプラインの設計と開発を主な業務とします。クロスファンクショナルなチームと連携し、日々の運用を効率化する自動化ツールの開発や、AWS、GCPなどのクラウドプラットフォーム上で最適なデータ運用を実現します。また、Kubernetes（k8s）を利用したコンテナオーケストレーションにより、アプリケーションの効率的なデプロイメントとスケーリングを支援し、最新のモニタリングおよびアラートシステムの実装を通じて、システムの安定性と性能を確保する重要な役割を担います。

・BS/MS degree in Computer Science ・3+ years of experience in building and operating large-scale distributed systems or applications ・Experience in Kubernetes development, Linux/Unix ・Experience in managing data lake or data warehouse ・Expertise in developing data structures, algorithms on top of Big Data platforms ・Ability to operate effectively and independently in a dynamic, fluid environment ・Ability to work in a fast-moving team environment and juggle many tasks and projects ・Eagerness to change the world in a huge way by being a self-motivated learner and builder

・Contributing to open source projects is a huge plus (please include your github link) ・Experience working with Python, Scala/Java is a plus ・Experience with Hadoop, Hive, Flink, Presto/Trino and related big data systems is a plus ・Experience with Public Cloud like AWS or GCP is a plus