【リモート可】シニアデータエンジニア

---

Job details

Company overview

Our client provides financial web services, aiming to alleviate the financial concerns and anxieties of individuals and businesses through the power of technology, and become the ultimate "money platform" for everyone.
Our main services include automated household accounting and asset management for individuals, economic media, and a financial product comparison platform. For businesses, we offer cloud services and B2B deferred payment services.

Responsibilities

※新会社在籍出向いただきます。
仕事内容：

• DatabricksネイティブツールやREST APIを用いた、複数システムからのデータパイプライン設計・実装
• Databricks上でのBronze／Silver／Gold各レイヤーのデータ変換の構築・運用（品質・一貫性・パフォーマンスの確保）
• データ品質チェックおよびシステム間の突合・整合ロジックの実装
• dbt等を用いたSQLクエリ・変換処理の開発・最適化
• 分析・レポーティング向けデータモデル設計（ALM、ERM、規制報告など）
• 下流利用者向けのREST APIやデータ提供レイヤーの構築
• データプラットフォーム構成に関するアーキテクチャ検討への参加
• パイプラインのユニットテスト、統合テスト、データ品質テストの実装
• データパイプラインの監視、障害対応、パフォーマンス改善
• パーティショニングやZ-order等を活用したクエリ性能チューニング
• TerraformによるデータプラットフォームのInfrastructure as Code（IaC）実装
• CI／CDパイプラインの構築（自動テスト・自動デプロイ）
• ミドルクラスのエンジニアのメンタリングおよびコードレビュー
• チーム内のドキュメント整備・ベストプラクティス策定
• バックエンドエンジニアとのAPI仕様・データスキーマの調整
• テックリードと協働したプラットフォーム設計や技術選定
• データプラットフォームにおける機能・イニシアチブのリード

Requirements

必須条件：

• データエンジニアリング、もしくはアナリティクスエンジニアリング領域での5年以上の実務経験
• SQLおよびPythonの高い実務スキル
• Databricks、Spark、dbt等、モダンなツールを用いたデータパイプライン構築経験
• Databricks開発・AWS環境での運用経験
• データモデリング手法の理解（ディメンショナルモデリング、データボルト、イベント駆動設計等）
• データ品質検証およびテストフレームワークの利用経験
• 英語：TOEIC（R）700点以上目安

Salary

5.8 - 11 million yen

Location

Tokyo