빅데이터 엔지니어

포지션 상세 정보

기술스택

Django
Kafka
Etl
NoSql
AWS
Flask
Python
SQL
Dw
GitHub

주요업무

▶ 팀소개
데이터아키텍처팀은 ktown4u의 시스템 관리, 대용량 데이터 기반의 혁신(Data Driven Innovation)과 인공지능을 정착시키기 위해 노력합니다. 이를 위한 노력으로 다음과 같은 업무를 수행합니다.

  • 환경 변화에 예측하여 시스템 성능 고도화를 위한 아키텍처 정립
  • AWS 클라우드 인프라 운영 및 관리
  • 시스템 모니터링 및 트러블 슈팅
  • DBMS 관리 및 튜닝
  • 검색, 추천, 개인화 개발&운영
  • 데이터 파이프라인 및 DL/DW 구축&운영
  • 빅데이터 아키텍처 설계 및 구축
  • 빅데이터 분석 및 시각화 대쉬보드 구축 및 레포팅

▶ 데이터아키텍처팀이 일하는 방식
  • 팀원간 서로 존중하고, 서로에게 배우며 같이 성장하고 있습니다.
  • 실패를 두려워하기 보단 도전을 중요시 합니다.
  • 문제에 대한 정의를 명확히 판별하며, 최적의 결과를 도출하기 위해 끊임없이 고민합니다.
  • 가능한 모든 정보를 공유하여 팀으로서의 협업과 문화를 존중합니다.
  • 관심있는 기술을 도입할는 것은 우리가 결정하며, 기술의 혁신을 논의합니다.

▶ Ktown4u의 데이터 엔지니어는 
  • 전세계 241개 국가의 회원정보, 상품, 물류 등의 대용량 데이터를 기반으로 데이터파이프라인, DL/DW를 구축하는 역할을 수행하게 됩니다.
  • 글로벌 K-POP 시장을 선도하는 Global E-Commerce 플랫폼에서 대용량 빅데이터 환경을 직접 구축하는 경험을 하실 수 있습니다.

▶ 담당업무
  • Ktown4u 빅데이터 플랫폼 설계 및 구축
  • ktown4u 플랫폼의 빅데이터 수집/저장/분석 아키텍처 설계 및 구축
  • Airflow 기반 ETL 데이터 파이프라인 설계 및 구축
  • 대용량 로그 수집/분석/모니터링 아키텍처 설계 및 구축
  • AWS EMR 기반 분석 아키텍처 구축

자격요건

▶ 경력 기술서(포트폴리오) 또는 개인 Github 주소 제출 권장
  • 3년 이상의 Back-End 개발 경력 또는 유관 경력을 가지신 분
  • 빅데이터 엔지니어로 성장하고 싶으신 분
  • Python 프레임워크 (Django, Flask 등) 개발 경험이 있으신 분
  • RESTful API 설계 및 개발/운영 경험이 있으신 분
  • AWS EMR 등 빅데이터 인프라 구축 및 운영 경험이 있으신 분
  • SQL, NoSQL을 능숙하게 작성 가능하신 분

우대사항

  • 새로운 기술과 도전하는 것을 좋아하며 거부감이 없으신 분
  • 대용량 데이터 분석 및 빅데이터 인프라 활용 경험이 있으신 분
  • AWS 환경에서 데이터 파이프라인 설계 및 운영 경험이 있으신 분
  • AWS DMS, Kafka Connect 등 CDC 파이프라인 구축 및 운영 경험이 있으신 분
  • 분산 처리 시스템(Hadoop, Spark, Hive 등)을 활용한 개발 경험이 있으신 분
  • Spark, Airflow 구현 경험이 있으신 분
  • ElasticSearch 기반 시스템 구축 경험이 있으신 분
  • 다양한 오픈소스 또는 서비스를 활용한 시스템 구축 경험이 있으신 분
  • 관련분야 재직 이력 또는 학위(전산, 통계, 머신러닝, 수학, 알고리즘 등) 소유자
  • AWS 자격증 또는 DBMS 관련 자격증 소지자
  • 타 부서 (비 개발자)와의 소통이 원활하신 분
  • 능동적이며 호기심이 많고, 비즈니스 마인드를 가지신 분
  • 업무 프로세스 및 개발 문화 개선에 관심이 많은 분

복지 및 혜택

▶ 직원의 행복을 추구하는 WORK & BALANCE!
  • 사내근로복지기금 운영(성과공유제)
  • 매달 10만원 고정인센티브 지급(메리츠 투자 지원금)
  • 매달 1만원 커피구입비 지원(메리츠 투자 지원금)
  • 경조금 및 경조휴가 지급 (결혼, 출산, 회갑, 부모님 칠순 및 팔순까지)
  • 유치원 자녀 학비 지원(자녀 제한 없음)
  • 매달 1회 2시간 조기퇴근! (당신의 특별한 하루를 위해) 
  • 종합건강검진 지원(KMI을 통해 20만원 이상의 검진 비용 지원)
  • 도서구입비 지원
  • 간식 주번 제도 운영(원하는 스낵 및 음료를 직접 구매가능)
  • 우수사원 포상, 장기근속포상
  • 동호회 활동을 위한 분기별 지원금 지급