|
구분 |
업무내용 |
자격요건 |
우대사항 |
|
Data Engineer |
- Azure, GCP, AWS 등 Cloud Native infrastructure 상에서 Data Pipeline 설계, 개발 및 운영 - Cloud Data PlatForm Infra 환경 구축 - 대용량 로그 파이프라인 및 실시간 파이프라인 설계 및 개발 - 데이터 전처리(ETL) 및 분석, 검증 프로세스 개발 |
- SQL, Hadoop, Spark 등 Tools을 사용한 대용량 데이터 처리 경험 - java, Python, Scala 등 하나 이상의 언어에 익숙하신 분 - 대용량 데이터 처리 관련 지식 보유 - 원활한 커뮤니케이션과 동료에 대한 배려를 갖추신 분 - 자율성 안에서 책임감 있게 업무를 해낼 수 있으신 분 |
- Cloud 환경의 Hadoop, Spark, DB 환경의 개발 역량 소유자(HDInsight, EMR, Dataproc 등) - Cloud 환경의 Batch/Real-Time 데이터 파이프라인 개발 역량 소유자 (Datafactory, Data pipeline, Glue, DataFlow 등) - 분산 처리 기술에 대한 깊은 이해 소유자 - Hadoop EcoSystem 기반의 다양한 솔루션 활용 경험자 - 컨테이너 환경에서 데이터 플랫폼 구축 경험자
|