Abbeal

採用

東京 · 正社員 · シニア(6-9年)

シニアデータエンジニア ― デジタルバンク(東京)

東京の新しいデジタルバンクが、Databricks / Delta Lakeを基盤とする中核データ基盤を構築するシニアデータエンジニアを募集しています。日本在住必須、ビジネスレベルの日本語必須。

  • AWS
  • Databricks
  • Delta Lake
  • Unity Catalog
  • Apache Spark
  • Terraform
応募する正社員(無期雇用)・応相談 ― 東京

応募条件

日本在住必須です。本ポジションは海外からのリロケーションやビザスポンサーシップの対象外であり、海外からのご応募には対応できません。

ビジネスレベルの日本語が必須です。

背景

クライアントは、日本を代表するフィンテック企業と大手金融グループのジョイントベンチャーとして誕生した、東京の新しいデジタルバンクです。中小企業(SMB)向けの組み込み型金融サービスをゼロから構築することをミッションとしています。

ポジション概要

Data PlatformチームのシニアData Engineerとして、このデジタルバンク内のほぼすべてのシステムをつなぐ中核データ基盤の構築・保守を担当します。各種銀行システムからデータを取り込み、複雑なビジネスロジックを適用したうえで、経営管理・規制報告・リスク管理などの後続システムへ提供します。シニアの個人貢献者(IC)ポジションとして、複雑なデータパイプラインの設計・実装、ミドルレベルエンジニアのメンタリング、プラットフォームのアーキテクチャ意思決定への参画を担います。

チーム体制

11名のエンジニアからなる少人数のアジャイルチームで、銀行業務側と密接に連携します。

技術スタック

  • クラウド ― AWS(東京リージョン)、S3データレイク、VPCネットワーキング、IAM
  • Databricksレイクハウス ― Delta Lake(ACID、タイムトラベル、スキーマ進化)、Bronze/Silver/Goldメダリオンアーキテクチャ、Unity Catalog
  • オーケストレーション・処理 ― Databricks Workflows、Apache Spark、AutoLoaderによるバッチ・ストリーミング取り込み
  • 変換 ― Delta Live Tables、SQLおよびPython、インクリメンタルなマテリアライズ
  • 分析 ― Databricks SQL、オートスケーリングSQLウェアハウス、データ提供用REST API
  • 開発・DevOps ― SQL、Python、GitHub、GitHub Actions、Terraform、AI支援開発ツール(Claude Code、GitHub Copilot)

業務内容

  1. REST APIまたはデータベース接続経由で複数のソースシステムから取り込むデータパイプラインの設計・実装
  2. データ品質・一貫性・パフォーマンスを担保するBronze/Silver/Gold変換の構築・保守
  3. データ品質チェックおよびシステム間リコンシリエーションロジックの実装
  4. Databricks SQL/ノートブックまたはDelta Live TablesによるSQLクエリ・変換の開発と最適化
  5. 分析・レポーティング用データモデルの設計(CRMデータ統合を中心に、規制報告および後続のリスク管理向けエクスポートも含む)
  6. 後続の利用者向けREST APIまたはデータ提供レイヤーの構築
  7. データプラットフォームのアーキテクチャ意思決定への参画
  8. パイプラインの単体・結合・データ品質テストの作成
  9. パイプラインのパフォーマンス監視、障害対応、改善実装
  10. クエリパフォーマンスの最適化(パーティショニング、Zオーダリング、チューニング)
  11. Terraformによるインフラのコード化(IaC)の実装
  12. 自動テスト・デプロイのためのCI/CD構築
  13. ミドルレベルエンジニアのメンタリング、コードレビュー

求める人物像

  • 有効な就労資格を持ち、すでに日本に在住していること ― 本ポジションは海外からのリロケーション・ビザスポンサーシップ対象外です
  • ビジネスレベルの日本語必須
  • データエンジニアリングまたはアナリティクスエンジニアリング経験5年以上
  • SQLおよびPythonの高い実務スキル
  • モダンなツール(Databricks、Spark等)を用いたデータパイプライン構築の実務経験
  • クラウドデータプラットフォーム(AWS、Azure、GCP)およびストレージ(S3、ADLS、GCS)の経験
  • 堅実なデータモデリング能力:ディメンショナルモデリング、データボールト、またはイベント駆動アーキテクチャ
  • データ品質検証・テストフレームワークの経験
  • 低速なクエリやデータ処理ジョブのデバッグ・最適化の実績
  • バージョン管理(Git)およびCI/CDパイプライン
  • データガバナンスの知識:アクセス制御、監査ログ、データリネージ
  • 高い問題解決力と自律的に業務を進める力
  • ジュニア・ミドルレベルエンジニアのメンタリング経験
  • 情報系・工学系の学士号、または同等の実務経験

尚可(あれば尚良い)

英語ビジネスレベル(TOEIC 700以上)・金融サービス/フィンテック/規制業界での経験・銀行業務ドメイン(コアバンキング、決済、規制報告、AML)・規制対応データプラットフォーム(FISC、FSA/BOJ報告、GDPR、APPI)・Databricks実務経験(AutoLoader、Unity Catalog、DLT、Databricks SQL、Workflows)・金融データのシステム間リコンシリエーション・Databricksのパフォーマンスチューニングとコスト管理・PythonによるREST API(FastAPI、Flask)・ストリーミング取り込み(Kafka、Kinesis)・OSSへの貢献。

応募する

シニアデータエンジニア ― デジタルバンク(東京)