ポジションの概要
高いスキルと経験を持つデータエンジニアを募集しています。データエンジニアは、スケーラブルなデータパイプラインとシステムの設計、開発、保守を担当します。この職務は、複雑なデータセットの構築、自動化による社内プロセスの改善、スケーラビリティと効率性のためのデータインフラの最適化において非常に重要です。理想的な候補者は、データサイエンティスト、アナリスト、その他のステークホルダーと密接に協力し、データ分析、ビジネスインテリジェンス、AIイニシアチブをサポートし、組織全体で高いデータ品質と整合性を確保します。
仕事の詳細
- 月~金|夜勤
- 在宅勤務
責任:
- スケーラブルなデータパイプラインとシステムの設計、開発、保守。
- 機能的および非機能的なビジネス要件を満たす、大規模で複雑なデータセットを組み立てる。
- 手動プロセスの自動化、データ配信の最適化、スケーラビリティ向上のためのインフラ再設計など、社内プロセスの改善を特定、設計、実施する。
- SQLとAzureテクノロジーを使用して、さまざまなデータソースからのデータの最適な抽出、変換、ロード(ETL)に必要なインフラストラクチャを構築する。
- データアナリティクス、ビジネスインテリジェンス、AIイニシアチブをサポートするためのデータアーキテクチャとシステムを開発し、維持する。
- データサイエンティスト、アナリスト、その他の関係者と協力し、データ関連の技術的問題を支援し、データインフラのニーズをサポートする。
- データのクリーニング、検証、分析を行い、データの品質と整合性を確保する。
- データパイプラインのパフォーマンスと信頼性を監視し、トラブルシューティングを行う。
必要条件
- コンピュータ・サイエンス、エンジニアリング、または関連分野の学士号。
- データエンジニアとして、または同様の職務における実績のある方
- SQLの知識が豊富で、リレーショナルデータベース(MySQL、PostgreSQLなど)の使用経験があること。
- ビッグデータツールやフレームワーク(Hadoop、Spark、Kafkaなど)の使用経験。
- Python、Java、Scalaなどのプログラミング言語に精通していること。
- Azure Data Factory、Azure Databricks、Azure Synapse Analyticsなど、Azureクラウドサービスの豊富な経験。
- データウェアハウスソリューション、特にMicrosoft Fabricに精通していること。
- 問題解決能力が高く、細部にまで気を配れる。
- 優れたコミュニケーション能力と協調性
- データ可視化、統計分析、予測モデリング、機械学習を含むデータ分析およびAIの経験。