담당업무

ㆍ우리는 이런 일을 하고 있어요!

   - 퍼블릭 클라우드(AWS) 환경 내 Apache Spark 를 활용한 대용량 데이터 처리

   - 대용량 데이터 분석 플랫폼 및 데이터 파이프라인 개발

   - 데이터 분석, 서비스 개발 등 다양한 직군과의 협업 기반 탐지 솔루션 개발

   - 탐지 도메인에 특화된 데이터 마트 구축

   - 탐지 솔루션에서 생산하는 대용량의 데이터를 데이터 레이크, 데이터 마트 등의 형태로 운영 

ㆍ우리는 앞으로 이런 일을 하고 싶어요!

   - Spark 기반의 데이터 파이프라인을 Snowflake 기반으로 재구축

   - Snowflake 기반의 ETL 파이프라인 구축 및 데이터 거버넌스 (카탈로그, 디스커버리) 구축

   - 대용량의 데이터를 관리하고 검증하기 위한 데이터 거버넌스 확립

   - 보다 안정적이고 테스트 가능한 데이터 파이프라인 개발

   - 탐지 솔루션의 다양한 워크플로우의 시스템화를 통한 효율적인 운영 환경 구축

자격요건

ㆍ우리는 이런 분과 함께하고 싶어요!

   - SQL, Python 등 하나 이상의 프로그래밍 언어를 이용하여 데이터를 능숙하게 다룰 수 있으신 분

   - 분산 처리 시스템을 사용하여 대용량 데이터를 처리한 경험이 있으신 분 

   - 컨테이너 환경에서의 데이터 엔지니어링 업무에 익숙하신 분

   - DW/DM 모델 설계 및 운영 경험이 있으신 분

   - 유관 경력이 5년 이상이거나 이에 준하는 역량을 보유하신 분

우대사항

ㆍ이런 분이면 더 좋아요!

   - Snowflake 또는 BigQuery 기반 대용량 데이터 처리 경험이 있으신 분

   - 데이터 거버넌스와 카탈로그에 대한 이해와 이를 바탕으로 데이터 디스커버리 플랫폼을 도입한

      경험이 있으신 분

   - 신뢰성있는 데이터 파이프라인에 대해 고민해보신 분