|
모집분야 : (국내 최고 화장품회사) Data Engineer
학력 : 대졸이상
경력 : 3년 ~10년
1) 수행 업무 ① AWS 기반의 - 배치 데이터 파이프라인 설계 및 개발
- 실시간 데이터 파이프라인 설계 및 개발
- 데이터 플랫폼 설계/구축 및 운영 모니터링
② DW/DM 데이터 수집 개발 및 운영
③ 데이터 거버넌스 관련 도구 개발 2) 자격 요건
① 경력년수: 3년 이상의 데이터 엔지니어 실무 경험
② 필요 경험 및 역량 - 클라우드 환경에서의 빅데이터 인프라 구축 및 플랫폼 운영 경험
- Java, Scala, Python 중 1개 이상의 언어로 능숙한 개발 가능 역량
- Hadoop 또는 AWS (EMR, MSK, Glue, Lambda등), Spark, ELK, Airflow 등의 데이터 관련 소프트웨어 사용 경험
- CI/CD (Gitlab, AWS Codepipeline 등) 경험 3) 우대 사항
- 분산 환경에서 대용량 데이터 처리(배치/스트리밍) 경험
- Rest API 및 서비스 개발 경험 (Spring boot & JPA 등)
- Kubernetes 등 컨테이너 오케스트레이션 시스템 활용 경험
- Snowflake, Databricks 개발/운영 경험
- Atlas, Amundsen, Datahub 등 통합 거버넌스 구축 및 운영 경험
- 다양한 오픈소스, 클라우드 등을 활용한 분석 플랫폼 구축 경험 및 운영 경험
|
에서!