データエンジニア
- 正社員
- 500万円~1500万円
- 東京都渋谷区
「スタンバイ」のデータエンジニアとして、ビッグデータ解析/分散処理基盤開発をお任せします。
2019年にヤフー株式会社(以下、ヤフー)を傘下に持つZホールディングス株式会社(以下、Zホールディングス)と株式会社ビズリーチ(現、ビジョナル株式会社)との合弁会社として新たなスタートを切り、ヤフーをはじめとしたZホールディングスが持つ様々なグループアセットと連携することも可能になりました。今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、その推進をお願いできればと考えております。
▼具体的には
・AWSを利?したビッグデータ解析?分散処理基盤のアーキテクチャ選定から設計・実装、運?フロー?動化の提案、実装
・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定
・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど)に応じたデータセットの作成
・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git,CI/CDの仕組み作りと維持
【開発環境】
サーバーサイド:Scala, Play Framework, ZIO, Flink
プロビジョニング:Terraform, Ansible
フロントエンド:JS, TypeScript, Vue.js
監視:DataDog, Kibana
クラウドサービス:AWS
分析基盤:fluentd, BigQuery, Athena, Google Data Studio, Redash
AWS:ECS, Fargate, Kinesis Data Stream, Lambda, EMR, RDS, Aurora, S3, CloudFront, ElastiCache
開発ツール:Github, Slack, Intellij IDEA, Jenkins, JIRA, SlackBot
仮想化基盤:Docker, Kubernetes
その他使用言語:Python, Go
ミドルウェア:Elasticsearch, nginx, MySQL, ClickHouse
事業内容・業種
Webマーケティング・ネット広告