채용 정보

[top tier e커머스기업] 빅데이터 처리 시스템 개발

페이지 정보

등록자 : 황광선대표컨설턴트 22-03-03 14:09

기본정보

[top tier e커머스기업] 빅데이터 처리 시스템 개발

대기업

~

무관

년 ~ 년

서류전형 및 코딩테스트 -> 1차면접 -> 2차면접

채용시

상세정보

본문

[빅데이터 처리 시스템 개발]
■ 직무 키워드: hadoop;yarn;hive;spark;kafka;elastic search;python;linux;shell script

■ 담당 직무[Our Mission]
11번가는 데이터를 기반으로 고객에게 더 나은 쇼핑 경험을 제공해 드리기 위하여 다양한 혁신을 만들어내고 있습니다.
저희는 고객 서비스 혁신과 플랫폼 혁신을 수행하기 위한 빅데이터 분석 플랫폼을 제공합니다. 이를 위해 머신러닝/딥러닝/통계분석 등을 수행할 수 있도록 데이터 플랫폼을 구축하고 운영하며 데이터를 수집하는 임무를 수행할 엔지니어를 모집합니다.

[Responsibilities]
• Hadoop ecosystem 구축
• Hadoop ecosystem 운영 시스템 설계/개발/운영(monitoring, auditing, metering 등)
• 대용량 데이터 수집/가공 파이프라인 구성
• 빅데이터 쿼리 및 시각화 도구 개발
• 빅데이터 기반 서비스 시스템 설계/개발/운영

■ 자격 요건
• Java, Scala, Python, R, SQL등 언어를 이용한 개발 경력(3년 이상)
• Big data 기술(hadoop, yarn, hive, spark, kafka, elastic search, nifi, kudu, druid, zeppelin 등) 구성 및 활용 개발 경력(1년 이상)
• Linux System 사용 및 Bash Script 개발 경험

■ 우대 사항
• Big data 플랫폼의 데이터 접근 제어 관련 기능 개발 경험
• Big data 플랫폼 사용자툴 및 운영툴 개발 경험
• Docker Container기반의 멀티테넌트 클러스터 구축 및 운영 경험
• 대용량 데이터 ETL 및 실시간 스트림 수집,처리,분석 경력
• Data 기반 Product Service 개발 및 운영 경력
• Devops Toolbox(Ansible, SaltStack 등) 사용 경력
• 머신러닝/딥러닝 모델을 이용한 서비스 개발 경력(DL4J, Spark, TensorFlow, Keras, Pytorch, MXNet, MLFlow 등)

go Top