Senior Data Engineer

소개

카운터포인트리서치는 테크놀로지, 통신, 반도체 등 IT시장에 관한 데이터와 인사이트를 제공하는 글로벌 리서치 기관이며, 특히 스마트폰 시장 리서치를 전문으로 하고 있습니다. 전세계 주요 스마트폰 제조사, 부품사, 증권사 고객에게 스마트폰 시장 점유율, 시장 분석 및 전망에 대한 보고서를 정기적으로 제공하고 있습니다. 현재 홍콩에 본사를 두고 있으며 미국, 영국, 인도, 중국, 대만, 중남미 등 글로벌 오피스에서 약 15개국의 고객들을 대상으로 서비스를 제공하고 있습니다. 현재 한국 오피스에는 약 30명의 직원이 근무 중이며, 글로벌 오피스에서는 약 150명의 직원이 근무하고 있습니다. 특히 2023년에는 첨단 디스플레이 시장 기술 전문 조사기관인 DSCC(Display Supply Chain Consultants)를 인수하는 등 회사 규모를 지속적으로 키워나가고 있습니다. ************************************************************************************************** 빅데이터팀은 현재 카운터포인트가 제공하고 있는 전자제품 판매량 추정자료와 예측자료를 대용량 데이터를 활용하여 고도화하는 활동을 하게 됩니다. 정확한 추정과 예측을 위해 대용량 데이터를 탐색, 측정, 평가하여 빅데이터 기반 기술을 통해 모델을 생성 및 튜닝함으로써, 예측값을 개발하는 역할을 합니다.

주요업무

"이런 일들을 함께 하고 싶어요" • 다양한 소스의 데이터를 효율적으로 수집할 수 있는 확장성 있는 배치 및 실시간 데이터 파이프라인을 구축. • 데이터 거버넌스 시스템을 구축하고, 정책을 정의하여 운영. • 모든 서비스와 프로세스에서 생성되는 기술 및 비지니스 메타데이터를 중앙화하고, 제공하는 환경을 구축. • 신뢰도 높은 데이터 인프라와 데이터 품질을 보장하기 위한 검증도구들을 개발. • 데이터 기반의 고객 가치 향상을 위한 데이터 기반 서비스를 설계하고 개발

자격요건

"이런 분이라면 목표 달성에 확신을 얻을 것 같아요" • 데이터엔지니어 경력 5년 이상의 유관 경력 혹은 이에 준하는 역량을 갖추고 계신 분 • AWS 클라우드를 활용한 데이터 플랫폼 인프라 구성에 대한 경험을 갖추신 분 • 자료구조, 알고리즘, OS, 네트워크, 데이터 베이스 등 기본적인 CS 지식에 대한 이해를 갖고 계신 분 • Python, SQL을 적극 활용 가능하며, 다양한 형태의 데이터를 다룰 수 있는 역량과 경험을 갖추신 분 • 데이터 파이프라인과 데이터 레이크 구축, 운영 경험이 있으신 분 • 데이터 모델링 경험이 있으며, 데이터 마트 생성 및 대시보드 구성 경험이 있으신 분 • 주요 활용 기술 스택 : - AWS Glue, EMR, Athena, DMS, MSK - Python, SQL, Java - Apache Airflow, Apache Spark - Databricks, Datahub

우대사항

"이런 분이라면 장기적으로 서로에게 더 긍정적일 것 같아요!" • Java, Scala, Rust 중 1개 언어에 대한 개발 역량을 갖고 계신 분 • HDFS 기반 스토리지 기술(Delta Lake, Ice berg)과 다양한 DBMS(PostgreSQL, Oracle, MongoDB, BigQuery, Clickhouse 등)에 대한 지식과 경험을 갖고 계신 분 • Kubernetes 클러스터 운영과 관련 Eco System에 대한 구축 및 활용 경험이 있으신분 • 데이터 모델링과 데이터 표준화에 대한 경험이 있고, 데이터 거버넌스 운영 경험이 있으신 분 • Databricks 구축하거나, 데이터 분석과 처리 및 거버넌스에 적극 활용 경험이 있으신 분 • 데이터 관련 도구와 기술에 대해서 적극적으로 학습하고 도입하는데 적극적이신 분 • 업무상 영어를 원활하게 사용할 수 있으신 분

혜택 및 복지

• 자기계발비 연간 120만원 지원 • 디지털 기기 지원 (아이폰, 애플워치 등 디지털 기기 구매 비용 지원) • 연차휴가 외 유급 하계휴가, 장기근속자 Refresh 휴가 • 무제한 간식 제공 (간식, 음료, 커피 머신 상시 비치) • 생일 축하금 지급 (좋은 날은 함께! 생일 파티 및 생일 상품권 지급) • 업무 관련 각종 온/오프라인 교육 지원 • 각종 도서비 지원 (연 50만원 도서비 및 장려금 지원) • 사내 컨테스트 진행 (다양한 사내 컨테스트를 통한 상품권 등 각종 경품 지급) • 개인별 오피스 기기 (노트북 등 개인별 주변 기기 지원) • 건강검진 제공 • 매년 글로벌 팀과 해외 워크샵 - 쿠알라룸푸르, 두바이, 홍콩, 코사무이, 뭄바이, 바르셀로나, 발리, 푸꾸옥 등