Data Engineer
Indexed description
Data Engineer – Korea Alternative Data Platform (경력 0 ~ 5년)
Mandata Data Team 소개
글로벌 투자기관이 선택한 맨데이터와 함께, 한국의 데이터를 세계 금융시장에 연결할 열정 있는 엔지니어를 찾습니다.
맨데이터 Data Team은 카드·POS·멤버십·이커머스 등 다양한 소비 데이터를 수집하고, 글로벌 기관투자자가 활용할 수 있는 투자 데이터셋으로 구조화합니다. 현재 AWS 기반 데이터 파이프라인을 고도화하며 기업·브랜드·상품 단위의 데이터 표준화, 품질 검증, 일별 데이터 전송 자동화, 고객용 API 개발을 진행하고 있습니다. 단순히 데이터를 적재하는 것을 넘어, 복잡한 원천 데이터를 신뢰도 높은 금융 데이터로 전환하고 글로벌 고객에게 안정적으로 제공하는 전 과정을 함께 설계할 데이터 엔지니어를 찾습니다.
주요 업무
데이터 파이프라인 구축 및 운영
- 카드·POS·멤버십 등 대용량 원천 데이터 수집 및 적재
- Python·SQL 기반 데이터 처리 파이프라인 개발
- AWS 기반 일별 배치 처리 및 자동화
- 데이터 누락·지연·실패 모니터링 및 복구 체계 구축
데이터 제공 시스템 개발
- 글로벌 고객 대상 데이터 API 개발 및 운영
- AWS S3, SFTP, API 기반 일별 데이터 전송
- 고객별 스키마·컬럼·전송 방식 커스터마이징
- 데이터 접근 권한 및 배포 이력 관리
데이터 구조화 및 품질관리
- 서로 다른 원천 데이터 포맷의 표준화 및 정제
- 기업·브랜드·상품·SKU 레벨 데이터 모델 설계
- 중복·결측·이상치·취소 거래 처리
- 정합성, 최신성, 스키마 변경 등 품질 검증 자동화
- 글로벌 기관투자자 기준에 맞춘 데이터 품질관리
데이터 제품 고도화
- 신규 데이터 상품 및 섹터별 데이터셋 구축
- 백테스트 가능한 Point-in-Time 데이터 관리
- 반복적인 데이터 운영 업무 자동화
- 분석팀·제품팀·글로벌 고객과의 기술 협업 및 CX관리
자격요건
- Python과 SQL을 활용한 데이터 처리 및 개발 역량
- DB 적재 파이프라인 구축 또는 운영 경험
- AWS 환경에서 데이터 저장·처리·배포 경험
- 네트워크 및 보안에 대한 기본적인 이해
- 관계형 데이터베이스 및 데이터 모델링에 대한 이해
- 운영 가능한 수준의 코드를 작성하고 문제를 해결할 수 있는 분
- 복잡하고 비정형적인 원천 데이터를 논리적으로 구조화할 수 있는 분
우대사항
- Airflow, dbt 등 데이터 워크플로 및 변환 도구 경험
- Spark 등 대용량 데이터 처리 경험
- 금융·결제·유통·이커머스 데이터 처리 경험
- 일별 배치 및 외부 고객 데이터 전송 경험
- API 개발 및 운영 경험
- AWS ec2 서버 운영 경험
- AWS VPC 운영 경험
- Docker 또는 CI/CD 기반 배포 경험
- 영어 문서 작성 및 글로벌 B2B 고객 대응이 가능한 분
- 실무경력 2년 이상
- 비즈니스에 직접적인 도움을 준 데이터 엔지니어링 사례 보유
이런 사람들과 함께 합니다
- 데이터 분석가, 상품 기획자 등과 원활하게 소통 및 협업할 수 있는 분
- 데이터가 실제 고객과 투자 의사결정에 어떻게 활용되는지까지 고민하는 분
- 불완전하고 복잡한 데이터 구조화 등 문제해결(problem solving) 하는 일을 즐기는 분
- 반복 업무를 자동화하고 운영 안정성을 높이는 데 관심이 있는 분
- 소비데이터, 위치데이터 등 다양한 대안데이터 에 관심있는 분
- 초기 단계의 데이터 플랫폼을 직접 설계하고 성장시키고 싶은 분
- 한국을 대표하는 글로벌 대안데이터 플랫폼을 함께 만들고 싶은 분
한국의 소비 데이터를 글로벌 투자 데이터로 전환하고, 매일 글로벌 기업들에 전달할 데이터 엔지니어를 기다리고 있습니다. 많은 지원 바랍니다.
Create a free Caio profile to unlock more results and save your role and location preferences.
Unlock free search