LabBase Plus celebrates pride
You have two remaining job offer view. Register to remove limit.

バックエンドデータエンジニア

Appier Japan株式会社

事業概要

AIと大規模言語モデルを駆使した革新的マーケティングソリューションの展開

Preview image for ⁨AIと大規模言語モデルを駆使した革新的マーケティングソリューションの展開⁩.

魅力ポイント

最先端AI技術とグローバル展開で成長を続けるテクノロジーカンパニー

Preview image for ⁨最先端AI技術とグローバル展開で成長を続けるテクノロジーカンパニー⁩.

Duties

大規模分散システムにおいて、PythonベースのRESTful APIの設計、開発、メンテナンスを行います。Trino/Presto、Pinotを活用した堅牢なデータウェアハウスの構築と管理、Apache AirflowとApache Sparkを用いたデータパイプラインの設計と開発を主な業務とします。クロスファンクショナルなチームと連携し、日々の運用を効率化する自動化ツールの開発や、AWS、GCPなどのクラウドプラットフォーム上で最適なデータ運用を実現します。また、Kubernetes(k8s)を利用したコンテナオーケストレーションにより、アプリケーションの効率的なデプロイメントとスケーリングを支援し、最新のモニタリングおよびアラートシステムの実装を通じて、システムの安定性と性能を確保する重要な役割を担います。

Requirements

・BS/MS degree in Computer Science ・3+ years of experience in building and operating large-scale distributed systems or applications ・Experience in Kubernetes development, Linux/Unix ・Experience in managing data lake or data warehouse ・Expertise in developing data structures, algorithms on top of Big Data platforms ・Ability to operate effectively and independently in a dynamic, fluid environment ・Ability to work in a fast-moving team environment and juggle many tasks and projects ・Eagerness to change the world in a huge way by being a self-motivated learner and builder

Welcomed Skills

・Contributing to open source projects is a huge plus (please include your github link) ・Experience working with Python, Scala/Java is a plus ・Experience with Hadoop, Hive, Flink, Presto/Trino and related big data systems is a plus ・Experience with Public Cloud like AWS or GCP is a plus

*Data presented in this article may be outdated. If you notice a discrepancy in our data, please notify us on our contact page, here following this link.