Data Engineer｜Microsoft Fabric・Azureを活用した大規模データ基盤構築

企業概要

当社クライアントは、エンタープライズ企業向けにデジタルトランスフォーメーション、クラウドモダナイゼーション、データプラットフォーム構築、システムインテグレーション、業務アプリケーション導入などを支援するグローバルテクノロジー企業です。

金融、製造、小売、消費財・サービス、ヘルスケア、通信、公共領域など、幅広い業界の大手企業を顧客としており、顧客の基幹業務、サービス運営、経営判断、長期的なDX戦略を支える大規模かつ重要度の高いプロジェクトを多数手がけています。

特にMicrosoftテクノロジーに強みを持ち、Azure、Microsoft Fabric、データプラットフォーム、アナリティクス、業務アプリケーション、モダンワークプレイス領域などを中心に、企業のデータ活用基盤やクラウド環境の設計・構築を支援しています。

プロジェクトは、特定領域のデータ基盤構築から、日本国内外の複数チームが関わる大規模なエンタープライズ変革プロジェクトまで多岐にわたります。先進的なクラウド・データ技術を活用しながら、設計、開発、実装、テスト、運用改善まで一連の工程に携われる環境です。

ポジション概要

データエンジニアとして、Microsoftテクノロジーを活用したエンタープライズ向けデータプラットフォームの設計・開発・構築をハンズオンで担当いただきます。

Data Warehouse、Data Mart、Data Lake、ETL / ELTパイプライン、データストリーミング基盤など、顧客の基幹システムやデータ活用を支えるデータ基盤のアーキテクチャ設計から実装まで携わるポジションです。

顧客やプロジェクト関係者とのコミュニケーションも発生しますが、主な役割は技術・開発面でのデリバリーです。スケーラブルなデータアーキテクチャの設計、信頼性の高いデータパイプラインの構築、クラウドベースのデータプラットフォーム実装、保守性・拡張性を考慮したシステム構築をリードしていただきます。

業務内容

主に以下のようなハンズオン業務をご担当いただきます。

• Microsoftテクノロジーを活用したデータプラットフォームの設計・開発・構築
• Data Warehouse、Data Mart、Data Lakeなど各種データ基盤の構築
• ETL / ELTパイプライン、データ連携処理、データストリームの設計・開発
• SQL、Pythonなどを用いたデータ処理・データ加工・データ操作
• データモデル、データベース構造、データフローアーキテクチャの設計
• パフォーマンス、拡張性、信頼性、保守性を考慮したデータパイプラインの構築・最適化
• Microsoft Fabric、Azure Synapse Analytics、Azure Data Factory、Azure Databricks、Azure Data Lake Storageなどを活用したデータ基盤実装
• 技術設計、開発、テスト、デプロイ、本番運用サポート
• データ品質、処理性能、連携、プラットフォームに関する課題の調査・改善
• アーキテクト、プロジェクトマネージャー、ビジネスアナリスト、顧客側の技術チームとの連携
• データ基盤設計、ツール選定、実装方針に関する技術的な意思決定の支援

プロジェクトにより、国内・海外出張が発生する可能性があります。

このポジションの魅力

• Microsoft FabricやAzureなど、Microsoftの最新データテクノロジーに携われる環境
• 大手企業の経営・サービスを支える大規模データプラットフォーム案件に参画可能
• Data Warehouse、Data Lake、ETL / ELT、データストリーミングなど、モダンデータ基盤の構築経験を深められる
• クラウド、データエンジニアリング、分析基盤、モダンデータアーキテクチャ領域で専門性を伸ばせる
• 技術設計から実装、改善までハンズオンで関われるポジション
• グローバルチームとの連携や、海外のナレッジ・デリバリー体制を活用できる環境
• 技術力だけでなく、大規模プロジェクトでの推進力やステークホルダー連携力も高められる

必須要件

以下いずれかのハンズオン経験を3年以上お持ちの方。

• Data Warehouse、Data Mart、Data Lakeなどのデータプラットフォーム設計・構築経験
• ETL / ELTパイプライン、データ連携処理、またはデータストリーミング基盤の開発経験
• SQL、Pythonなどを用いたデータ処理・データ加工・データ操作の実務経験

加えて、以下のような方を想定しています。

• データ基盤、データパイプライン、データ処理に関する技術的な課題解決力をお持ちの方
• 要件や仕様を理解し、設計・実装・テスト・改善まで主体的に対応できる方
• パフォーマンス、拡張性、信頼性、保守性を意識したシステム開発ができる方
• プロジェクト型の開発環境で、社内外の関係者と連携しながら業務を進められる方
• 技術的な内容を分かりやすく説明し、実装方針や課題について適切にコミュニケーションできる方

歓迎要件

以下いずれかのご経験・知見をお持ちの方は歓迎します。

• Microsoft Fabricを活用したシステム構築経験、または今後Microsoft Fabricのスキルを身につけたい方
• クラウド環境を利用したデータ基盤・分析基盤の設計、構築、運用経験
• Microsoft FabricまたはAzureのデータプラットフォームサービス群を用いた開発・構築経験
  • Azure SQL Database
  • Azure Synapse Analytics
  • Azure Cosmos DB
  • Azure Databricks
  • Azure HDInsight
  • Azure Analysis Services
  • Azure Stream Analytics
  • Azure Data Lake Storage
  • Azure Data Factory
• SQL Serverの各種機能を使用した開発・構築経験
  • Database Engine
  • Integration Services
  • Analysis Services
  • Master Data Services
• Lambda / Kappaアーキテクチャパターンに関する知識
• アジャイル・スクラム開発の経験
• Visual Studio、SQL Management Studio、Synapse Studio、R Studioなどの開発ツール使用経験
• Git、Azure DevOpsの使用経験
• 以下のようなMicrosoft認定資格をお持ちの方
  • Fabric Analytics Engineer Associate
  • Fabric Data Engineer Associate
  • Azure Data Engineer
  • Azure Developer
• Snowflake、Teradata、Netezza、Hadoopなどのデータプラットフォーム・ビッグデータ関連製品に関する知識または導入経験
• Tableau、Qlik、MicroStrategy、Cognos、Business Objects、Dr.Sum、SAS、Hyperion、SAP BWなど、Microsoft以外のデータプラットフォーム製品に関する知識または導入経験
• データ活用に関する業務分析、要件定義、業務改善提案の経験
• データソリューション領域におけるプリセールス、技術提案、PoC対応の経験
• ビジネスレベルの英語力
• プロジェクト内で特定の技術領域をリードした経験
• 2〜3名程度のサブチームをリードし、設計・実装・品質面で責任を持った経験

求める人物像

最新のMicrosoftテクノロジーを活用し、難易度の高いデータプラットフォーム案件にハンズオンで携わりたい方に適したポジションです。

Data Warehouse、Data Lake、ETL / ELT、データストリーミング、クラウドデータ基盤などの設計・構築に関わりながら、技術的な専門性をさらに高めたい方を歓迎します。

純粋なアドバイザリーやプリセールス中心のポジションではなく、実際にシステムを設計・開発・実装し、パフォーマンスや信頼性、保守性を改善していくことにやりがいを感じる方にフィットします。

また、大規模プロジェクトの中で、アーキテクト、PM、ビジネスアナリスト、顧客側の技術チームなどと連携しながら、技術面からプロジェクトを推進できる方を求めています。