Search

Data Engineer

경력
경력 3년 이상
업무 관련 기술
python
scala
속성

조직소개

EJN의 Platform Engineering그룹은 Creator와 Fan들의 끊김없고 활발한 인터랙션을 위해 안정적이고 신뢰성 있는 확장 가능한 인프라를 설계하고 운영하는 역할을 하며 대용량 데이터로부터 인사이트를 효과적으로 뽑아낼 수 있는 데이터플랫폼의 설계와 구축을 담당합니다. 이를 위해 Cloud-Native기반의 다양한 기술들을 벤치마킹하고 적용하며 효율적 개발환경과 안정적인 배포환경을 위한 Best Practice를 연구하고 실행합니다. Legacy 시스템으로부터 MSA기반 Modern Architecture로의 조화로운 Transformation을 진행중이며 필요한 서비스들을 빠르고 안정적으로 개발할 수 있는 기반을 만들어 사업 확장에 중추적인 역할을 합니다. 최적의 플랫폼 빌딩을 위해 엔지니어들의 기술적 다양성과 새로운 시도들을 존중하고 지원하며 실험과 검증의 반복을 통해 우리에게 맞는 방식을 찾아가는 문화를 지향합니다.

주요 업무

서비스에 대한 이해를 바탕으로 최적의 데이터 파이프라인 및 데이터 플랫폼 구축 및 운영
클라우드 기반 데이터 처리 솔루션들의 이해를 바탕으로 Data Lake 및 DW를 구축
대용량 DBMS의 안정적 운영 및 데이터 백업 및 복구 진행
데이터분석 및 머신러닝을 위한 Raw Data의 효율적 정제 및 데이터 구조 정의
빅데이터 쿼리(Athena, BigQuery등) 툴 및 BI 툴의 소스 데이터 관리

기술스택

Cloud & Infra : AWS, GCP, K8S, ECS, EC2
Tool : Kafka, Airflow, BigQuery, PySpark
DBMS : MySQL, MariaDB, PostgreSQL, Redis, ElasticSearch

자격 요건

3년 이상의 데이터엔지니어링 실무경험, 또는 이에 준하는 실력을 갖춘 분
7년 이상 경력의 경우 Team Lead로 지원 가능
분산환경에서 대용량 데이터 Batch처리 또는 비동기 데이터 처리 경험이 있으신 분
Spark, Kafka, Airflow, Hive등 다양한 데이터 툴들로 데이터 수집 및 처리 경험이 있는 분

우대 사항

빠르게 성장하는 서비스에서의 고가용성 데이터 플랫폼 설계 및 운영 경험이 있는 분
데이터분석 및 머신러닝 프랙티스에 대한 이해와 경험이 있는 분
NoSQL DB(ElasticSearch, Redis, MongoDB 등)사용 경험이 풍부하신 분
컨테이너기반 개발환경 및 MSA를 위한 데이터인프라 구축경험이 있는 분
대용량 분산환경에서의 데이터 처리, H/A구성 및 장애 대응 경험이 있는 분

제출 서류

자유 양식의 입사 지원서
포트폴리오
Github 주소