Azure Databricks運用保守エンジニア募集
基本情報
単価
72万円/月
勤務地
東京都
リモート
フル常駐
職種
クラウドエンジニア、データベースエンジニア、プログラマー、システムエンジニア
スキル
DatabricksAzureDWHETLSystemwalkerジョブ管理DomoAzure Data FactoryData LakeUnity Catalog
案件詳細
案件名:石油会社向けDatabricks運用保守案件
内 容:
【募集背景】
石油業界向けデータ分析基盤の安定稼働および機能拡張に向けて、データ基盤運用体制を強化するための募集となります。
【作業内容】
Azure Databricks上のDWHおよびETL処理の運用保守をご担当いただきます。具体的には、障害発生時の調査・復旧対応、利用部門からの問い合わせ対応、既存PGの改修や小規模な追加開発などを行っていただきます。また、Bronze/Silver/Gold構造で加工されたデータのDWH格納に関するジョブ監視や調整、Systemwalkerを用いたジョブ管理業務にも携わっていただきます。Domoで可視化されるデータの品質維持に向けた運用改善やチューニングもご対応いただきます。
【求める人物像】
データ基盤運用に責任感を持ち、障害発生時にも落ち着いて状況整理と関係者への説明ができる方を求めております。新しいクラウドサービスやデータ関連技術に対して前向きにキャッチアップし、自ら改善提案ができる方にマッチするポジションです。
【ポジションの魅力】
Azure Databricksを中心としたモダンなデータ基盤運用に携わることで、クラウドDWHやETL、ジョブ管理の実務経験を一貫して積むことができます。大規模なデータ処理基盤の運用ノウハウを獲得できるほか、今後需要が高まるクラウドデータエンジニアリング領域のスキル向上にもつながる環境です。
【開発環境】
Azure Databricksを中心としたクラウドDWH・ETL基盤上で、Bronze/Silver/Gold構造によるデータ加工を行っております。ジョブ管理にはSystemwalkerを利用しており、可視化基盤としてはDomoを採用しています。
スキル:
・Databricksを用いた運用保守経験
・Azure環境における運用保守経験
・DWHおよびETLの運用経験
・Systemwalkerなどジョブ管理ツールの運用経験
尚 可:
・Azure Data Factory / Data Lake / Unity Catalogの利用経験
・PySparkでの開発・運用経験
・SQLを用いたデータ操作・集計経験
・GitHubを用いたソースコード管理経験
単 価:720000(税別) ※スキル見合い
精 算:140-180h(想定)
時 期:長期
場 所:中央区 ※常駐/週5日出社
定 時:
面 談:1回
商 流:
サイト:月末締め翌月15日支払い(15日サイト)
その他:ご不明な点がございましたらお問い合わせください。
関わるプロジェクトについて
企業名
***********
募集背景
************************************
課題感
*****************************
プロジェクト規模
***********
チーム人数
*****
現場の雰囲気
********************
作業開始/終了時間
***************
平均稼働時間
*********
詳しくはカウンセラーにお聞きください。
カウンセラーに詳細を聞く