東京 · 正社員 · シニア(6-9年)
シニアデータエンジニア ― デジタルバンク(東京)
東京の新しいデジタルバンクが、Databricks / Delta Lakeを基盤とする中核データ基盤を構築するシニアデータエンジニアを募集しています。日本在住必須、ビジネスレベルの日本語必須。
- AWS
- Databricks
- Delta Lake
- Unity Catalog
- Apache Spark
- Terraform
応募条件
日本在住必須です。本ポジションは海外からのリロケーションやビザスポンサーシップの対象外であり、海外からのご応募には対応できません。
ビジネスレベルの日本語が必須です。
背景
クライアントは、日本を代表するフィンテック企業と大手金融グループのジョイントベンチャーとして誕生した、東京の新しいデジタルバンクです。中小企業(SMB)向けの組み込み型金融サービスをゼロから構築することをミッションとしています。
ポジション概要
Data PlatformチームのシニアData Engineerとして、このデジタルバンク内のほぼすべてのシステムをつなぐ中核データ基盤の構築・保守を担当します。各種銀行システムからデータを取り込み、複雑なビジネスロジックを適用したうえで、経営管理・規制報告・リスク管理などの後続システムへ提供します。シニアの個人貢献者(IC)ポジションとして、複雑なデータパイプラインの設計・実装、ミドルレベルエンジニアのメンタリング、プラットフォームのアーキテクチャ意思決定への参画を担います。
チーム体制
11名のエンジニアからなる少人数のアジャイルチームで、銀行業務側と密接に連携します。
技術スタック
- クラウド ― AWS(東京リージョン)、S3データレイク、VPCネットワーキング、IAM
- Databricksレイクハウス ― Delta Lake(ACID、タイムトラベル、スキーマ進化)、Bronze/Silver/Goldメダリオンアーキテクチャ、Unity Catalog
- オーケストレーション・処理 ― Databricks Workflows、Apache Spark、AutoLoaderによるバッチ・ストリーミング取り込み
- 変換 ― Delta Live Tables、SQLおよびPython、インクリメンタルなマテリアライズ
- 分析 ― Databricks SQL、オートスケーリングSQLウェアハウス、データ提供用REST API
- 開発・DevOps ― SQL、Python、GitHub、GitHub Actions、Terraform、AI支援開発ツール(Claude Code、GitHub Copilot)
業務内容
- REST APIまたはデータベース接続経由で複数のソースシステムから取り込むデータパイプラインの設計・実装
- データ品質・一貫性・パフォーマンスを担保するBronze/Silver/Gold変換の構築・保守
- データ品質チェックおよびシステム間リコンシリエーションロジックの実装
- Databricks SQL/ノートブックまたはDelta Live TablesによるSQLクエリ・変換の開発と最適化
- 分析・レポーティング用データモデルの設計(CRMデータ統合を中心に、規制報告および後続のリスク管理向けエクスポートも含む)
- 後続の利用者向けREST APIまたはデータ提供レイヤーの構築
- データプラットフォームのアーキテクチャ意思決定への参画
- パイプラインの単体・結合・データ品質テストの作成
- パイプラインのパフォーマンス監視、障害対応、改善実装
- クエリパフォーマンスの最適化(パーティショニング、Zオーダリング、チューニング)
- Terraformによるインフラのコード化(IaC)の実装
- 自動テスト・デプロイのためのCI/CD構築
- ミドルレベルエンジニアのメンタリング、コードレビュー
求める人物像
- 有効な就労資格を持ち、すでに日本に在住していること ― 本ポジションは海外からのリロケーション・ビザスポンサーシップ対象外です
- ビジネスレベルの日本語必須
- データエンジニアリングまたはアナリティクスエンジニアリング経験5年以上
- SQLおよびPythonの高い実務スキル
- モダンなツール(Databricks、Spark等)を用いたデータパイプライン構築の実務経験
- クラウドデータプラットフォーム(AWS、Azure、GCP)およびストレージ(S3、ADLS、GCS)の経験
- 堅実なデータモデリング能力:ディメンショナルモデリング、データボールト、またはイベント駆動アーキテクチャ
- データ品質検証・テストフレームワークの経験
- 低速なクエリやデータ処理ジョブのデバッグ・最適化の実績
- バージョン管理(Git)およびCI/CDパイプライン
- データガバナンスの知識:アクセス制御、監査ログ、データリネージ
- 高い問題解決力と自律的に業務を進める力
- ジュニア・ミドルレベルエンジニアのメンタリング経験
- 情報系・工学系の学士号、または同等の実務経験
尚可(あれば尚良い)
英語ビジネスレベル(TOEIC 700以上)・金融サービス/フィンテック/規制業界での経験・銀行業務ドメイン(コアバンキング、決済、規制報告、AML)・規制対応データプラットフォーム(FISC、FSA/BOJ報告、GDPR、APPI)・Databricks実務経験(AutoLoader、Unity Catalog、DLT、Databricks SQL、Workflows)・金融データのシステム間リコンシリエーション・Databricksのパフォーマンスチューニングとコスト管理・PythonによるREST API(FastAPI、Flask)・ストリーミング取り込み(Kafka、Kinesis)・OSSへの貢献。
応募する
シニアデータエンジニア ― デジタルバンク(東京)
