データプラットフォームエンジニア

オープン系SE、データベース系SE

関東地方|東京都;九州・沖縄地方|福岡…

￥

700万円〜1500万円

正社員

仕事内容

新規で構築するデータ分析基盤の設計から携わって頂きます。

データ基盤における要件定義～リリースまでのシステム開発
大規模データや高負荷システムの設計・開発・チューニング
プライバシーとセキュリティ基準を設計段階から遵守
システム・サービス維持のための保守運用

▼Tech Stack
言語：Python / Scala
OS ： Linux
Platform : AWS(EKS , Glue etc...)
CI : Jenkins
CD : ArgoCD
IaC : Terraform,Atlantis
その他 : Spark,Debezium

▼本ポジションの魅力
PayPayやLINEヤフーなどのグループ会社のエンジニアと連携しながら国内有数の数億～数十億単位のデータ量を取り扱うことができる
サービス成長の判断軸となるデータの基盤/DWHを作る業務なので、データを解析、利活用することによりサービスを成長させることができ、社内、ユーザーの様々な方への価値提供に繋がる
データ基盤を刷新するにあたり、新しい技術・手法に積極的にチャレンジすることができる（メンバーレベルから技術提案・構成検討ができます）
ミッションクリティカルなシステムでセキュリティ・レスポンス速度等の精度が求められる環境のため、スピード感をもって業務にあたることができる

▼組織・チーム紹介
PayPayカードクレジットカードの業務システム（基幹システム・周辺システム）の開発を担う組織の中のデータ基盤のシステムの開発・運用を行うチームです。

募集要項

応募方法

必要なスキル

・複雑なデータパイプラインの構築かデータ分析基盤の開発経験が３年以上
・少なくとも1つの主要言語（例Python Java Scala）およびSQL（任意のバリアント）の経験
・AWS EKSやGlueを利用した開発経験
・Spark等を用いた分散処理の開発経験
・GitOpsの導入/運用経験
・大規模システムの開発運用経験、もしくは大規模データや高負荷システムの経験
・ETLプロセスの作成と保守の経験
・DataLakeまたはデータウェアハウスの設計構築運用の経験
・DBMSおよびSQLチューニングの経験

その他・PR

雇用形態

【正社員】

企業情報