이 직무 공유하기
[DI팀] Data Engineer (인프라 및 파이프라이닝 개발)
[DI팀 소개]
야놀자 내외 다양한 데이터를 적정 주기로 입수/저장하여 데이터 소비 요구에 맞는 서비스 및 데이터를 제공하고 있으며, 사내 데이터 소비자를 위한 분석 도구(Tableau, re:dash, JupyterHub, Zeppelin 등)를 제공하고 있습니다. 앱/웹 사용자를 위한 개인화 및 추천을 비롯하여 업주(셀러)를 위한 통계, 가격 최적화(Dynamic Pricing) 등 데이터 서비스를 발굴하여 개발 및 운영하고 있습니다.
[담당업무]
- 빅데이터 인프라 구축 및 운영
- 팀 내부 주사용 AWS 인프라 운영 및 모니터링. (EMR, PrestoDB, DynamoDB, RDS, Kinesis, Firehose, S3, ...)
- Druid 구축 및 운영
- 데이터 입수 파이프라인 구축 및 운영
- 야놀자 본사 및 국/내외 야놀자 관계사 데이터(DB, 클라이언트/서버 로그 등) 입수 어플리케이션(Spark, Spark Streaming) 개발 및 운영
- Firebase(Bigquery), MMP 등 3rd-party 데이터 입수 파이프라인 개발 및 운영
- ETL 개발 및 운영
- 사내 데이터 소비자를 위한 입수된 데이터(Tier1)의 파생 데이터 프로덕트(Tier2) 개발 및 운영
- 야놀자 앱/웹 및 셀러사이드 관리자 통계 데이터 개발 및 운영
[자격요건]
- 해당 경력 2년차 이상 또는 이에 상응하는 업무 능력 보유
- 데이터 인프라, 입수 및 처리를 위한 어플리케이션 개발 경험
- Python, Scala, Java 중 1개 이상 개발 경험
- * 전문연구요원 지원 가능
[우대사항]
- 새로운 기술에 거부감이 없는 분
- Spark을 이용한 데이터 프로덕트 개발 경험(배치/근실시간)
- 서버/앱/웹로그 배치/실시간 입수 및 운영 경험
- AWS, kubernetes 및 클라우드 서비스 기반 빅데이터 인프라 구축 및 운영 경험
- Kinesis, Kafka 구축 및 운영 경험
- MySQL 계열 RDBMS 운영 및 쿼리 최적화 경험
- CDC관련 파이프라인 구축 및 운영 경험
- 영어 회화 및 메일 커뮤니케이션 가능
[채용절차]
-
서류전형→과제→면접→처우산정→내부승인→최종 합격(오퍼 레터 발송)
-
포지션에 따라 평판조회 전형이 추가될 수 있습니다.
-
야놀자는 지원자의 역량을 최우선으로 검토합니다. 연봉 정보는 처우산정 시 전달 주세요.
[야놀자 더 알아보기]
* 국가유공자 예우 및 지원에 관한 법률에 의거 취업 보호 대상자 및 장애인은 관련 법규에 따라 우대합니다.
* 채용 절차 진행 시 구직자에게 수령한 서류는 구직자의 채용 여부 확정일 이후 180일 동안 보관하고 이후 파기합니다
