포지션 요약:
저희 팀에 합류할 고도로 숙련되고 경험이 풍부한 데이터 엔지니어를 찾고 있습니다. 데이터 엔지니어는 확장 가능한 데이터 파이프라인과 시스템을 설계, 개발 및 유지 관리하는 업무를 담당하게 됩니다. 이 역할은 복잡한 데이터 세트를 조립하고, 자동화를 통해 내부 프로세스를 개선하며, 확장성과 효율성을 위해 데이터 인프라를 최적화하는 데 매우 중요합니다. 이상적인 지원자는 데이터 과학자, 분석가 및 기타 이해관계자와 긴밀히 협력하여 데이터 분석, 비즈니스 인텔리전스 및 AI 이니셔티브를 지원함으로써 조직 전체에서 높은 데이터 품질과 무결성을 보장합니다.
작업 세부 정보:
- 월요일부터 금요일까지 | 야간 근무
- 재택 근무
책임:
- 확장 가능한 데이터 파이프라인과 시스템을 설계, 개발 및 유지 관리하세요.
- 기능적 및 비기능적 비즈니스 요구 사항을 충족하는 크고 복잡한 데이터 집합을 조합합니다.
- 수동 프로세스 자동화, 데이터 전송 최적화, 확장성 향상을 위한 인프라 재설계 등 내부 프로세스 개선 사항을 파악, 설계 및 구현합니다.
- SQL 및 Azure 기술을 사용하여 다양한 데이터 원본에서 데이터를 최적으로 추출, 변환 및 로드(ETL)하는 데 필요한 인프라를 구축하세요.
- 데이터 아키텍처와 시스템을 개발 및 유지 관리하여 데이터 분석, 비즈니스 인텔리전스 및 AI 이니셔티브를 지원합니다.
- 데이터 과학자, 분석가 및 기타 이해관계자와 협력하여 데이터 관련 기술 문제를 해결하고 데이터 인프라 요구 사항을 지원합니다.
- 데이터 정리, 유효성 검사 및 분석을 수행하여 데이터 품질과 무결성을 보장합니다.
- 데이터 파이프라인 성능과 안정성을 모니터링하고 문제를 해결하세요.
요구 사항:
- 컴퓨터 과학, 공학 또는 관련 분야의 학사 학위.
- 데이터 엔지니어 또는 이와 유사한 역할로 입증된 경력.
- SQL에 대한 전문 지식과 관계형 데이터베이스(예: MySQL, PostgreSQL) 사용 경험이 있어야 합니다.
- 빅데이터 도구 및 프레임워크(예: Hadoop, Spark, Kafka) 사용 경험.
- 파이썬, 자바, 스칼라 등의 프로그래밍 언어에 능숙해야 합니다.
- Azure 데이터 팩토리, Azure 데이터 브릭스, Azure 시냅스 애널리틱스 등 Azure 클라우드 서비스에 대한 광범위한 경험.
- 데이터 웨어하우징 솔루션, 특히 Microsoft Fabric에 익숙해야 합니다.
- 강력한 문제 해결 능력과 세부 사항에 대한 주의력.
- 뛰어난 커뮤니케이션 및 협업 기술.
- 데이터 시각화, 통계 분석, 예측 모델링, 머신 러닝 등 데이터 분석 및 AI에 대한 경험이 있어야 합니다.