データエンジニア募集:Databricks・AWS・SQL必須
基本情報
単価
80万円/月
勤務地
東京都 / 霞ヶ関駅
リモート
リモート併用
職種
データサイエンティスト、データベースエンジニア、プログラマー
スキル
DatabricksAWSSQLdbtScalaReactTableauデータマネジメントデータウェアハウスETL
案件詳細
【案件】【データエンジニア】データ基盤構築・抽出
【案件概要】
国内最大級の購買データを扱う: 膨大なID-POSデータ(オフライン購買データ)を活用した、国内トップクラスのデータプラットフォーム開発に携われます。
データマネジメントの要(抽出・標準化): 複数の小売店から届く多様なフォーマットのデータを標準化し、円滑に取り込む「データマネジメント」が本ポジションの主要ミッションです。
モダンな分析基盤: データウェアハウスには Databricks を採用。
大規模データの抽出・整形から、ML機能の導入を見据えた基盤構築まで、技術的な挑戦が可能です。
【業務内容】
・広告配信プラットフォーム(DSP)およびデータ基盤における、データ抽出・整形・管理業務全般を担当
・提携する各小売店から届く多種多様なフォーマットのID-POSデータの標準化および取り込み(データマネジメント)
・広告配信管理コンソールのUI/UX改善に伴う、フロントエンドへのデータ連携設計
・購買データを活用した「リーチ予測」や「CVRシミュレーション」機能のロジック実装およびデータ抽出
・標準化・テンプレート化された広告効果測定レポート基盤の構築
・Databricksを軸としたETLパイプラインの運用・改善および、BIツール(Tableau等)を統合したデータ可視化フローの効率化
・データサイエンティストと連携した、分析ロジックや統計モデルのシステム統合
◆必須
・クラウドDWHの実務経験: BigQuery, Snowflake, Redshift, Databricks, Synapseのいずれかを用いた開発経験
・AWS環境での開発経験: インフラ構成を理解した上でのバッチ処理やデータ連携の実装経験
・高度なSQLスキル: 数億件規模の大規模データに対する集計・分析および、実行計画を意識した最適化の知識
・コミュニケーション能力: データアナリストやエンジニア、ビジネスサイドと連携し、要件を正しくプロダクトへ落とし込める方
◆尚可
・dbt を用いたデータモデリング・トランスフォームの実務経験
・ETLパイプラインの構築・運用経験
・ScalaまたはJVM系言語でのサーバーサイド開発経験
・広告テクノロジー(DSP/SSP/DMP)に関するドメイン知識
【参画時期】即日
【募集人数】1名
【稼働日数】週5日
【作業場所】週3日出社
※初月は全日出社。2ヶ月目以降は週3出社(在宅日は選択可)
【単 価】75 - 80万円
【精 算】140-180h
【就業時間】09:00〜18:00
【面談回数】1回(Web)※面談では、SQLの基礎知識から、実務経験に紐づく具体的な技術理解を確認する質問があります。
【商 流】エンド→元請→上位→弊社
【備 考】
技術スタック: Databricks, AWS, SQL, dbt, Scala, React, Tableau
PC貸与: あり
【案件の背景・期待される役割】
2026年に向けたプロダクト戦略(シミュレーション機能強化、新規メディア連携、流通企業との提携拡大)に伴う増員募集です。
取り扱うデータ量と提携先が急拡大しており、データの「抽出・整形」を効率化できるエンジニアが不可欠となっています。
単なるオペレーションではなく、膨大な購買データをいかにビジネス価値へ変換できるかという、サービス成長の核となる役割が期待されています。
【面談時に出た質問】
・INNER JOINとLEFT JOINの違いは?
・例えばAとBという2つのテーブルがあり、この2つのテーブルどちらにも2レコードずつ入っています。
このAとBをJOINしました。JOINした時の結果が何行になるのか
・Window関数をご存じですか?
・UNIONとUNION ALLの違いは?
・AIをどのように活用していますか?
関わるプロジェクトについて
企業名
***********
募集背景
************************************
課題感
*****************************
プロジェクト規模
***********
チーム人数
*****
現場の雰囲気
********************
作業開始/終了時間
***************
平均稼働時間
*********
詳しくはカウンセラーにお聞きください。
カウンセラーに詳細を聞く