AI가 이 공고를 요약해드릴게요!
LINE Pay AI 조직에서 AI Agent 연동을 위한 데이터 파이프라인 구축 및 MLOps 환경 구축을 담당할 데이터 엔지니어를 채용합니다. 주요 업무는 데이터 파이프라인 설계, API 연동 개발, MLOps 환경 구축이며, Hadoop, Spark, Docker, Kubernetes 등 관련 기술 경험과 MLOps 및 모델 서빙 경험을 요구합니다.
데이터 엔지니어링 및 MLOps 최신 기술 트렌드에 대한 학습 능력이 중요합니다.
- 조직소개
LINE Pay는 대만, 태국 등 글로벌 시장에서 결제, 송금 서비스를 제공하며, AI 조직은 AI 기반 핀테크 모델 및 솔루션을 개발하고 데이터 분석을 통해 비즈니스 전략을 지원합니다. 대만 LINE Pay의 데이터 기반 업무 혁신을 주도하며, AI 기술을 활용한 광고 서비스 추천 시스템 최적화 및 맞춤형 솔루션을 개발 중입니다.
데이터 기반 혁신을 선도하며, 최신 기술 습득과 최적 솔루션 발굴을 통해 사용자에게 최고의 서비스를 제공하고자 합니다.
- 담당업무
- AI Agent와 연계할 데이터 파이프라인 설계/구축/운영
- 대규모 데이터 수집, 정제, 변환 및 적재(ETL) 시스템 개발 및 운영
- 실시간 및 배치 데이터 파이프라인 구축을 위한 데이터 스트리밍 처리 기술
- 데이터 무결성, 스키마 관리 등 데이터 품질 모니터링 및 데이터 거버넌스 정책 수립
- AI Agent와 연계할 외부 데이터 연계를 위한 API 연동 개발
- AI 모델 서빙을 위한 API 설계 및 개발
- AI 모델과 BI 시스템 또는 외부 서비스 간 데이터 연동을 위한 API Gateway 구축
- API 성능 모니터링 및 로깅 시스템 구축
- MLOps 및 모델 서빙 환경 구축
- AI 및 ML 모델을 위한 데이터 파이프라인과 MLOps 자동화 환경 구성
- 모델 버전 관리 및 A/B 테스트를 위한 실험 관리 시스템 구축
- 모델 배포 및 서빙을 위한 인프라 구축
- 자격요건
- 3년 이상의 데이터 파이프라인 개발 경력
- Apache Airflow 기반 ETL 파이프라인 개발 및 운영 경험
- 대용량 데이터 플랫폼 및 분산 처리에 대한 이해와 경험(Hadoop/Hive/Spark 등)
- Docker, Kubernetes(K8s) 기반 데이터 파이프라인 구축 및 운영 경험
- MLOps 및 모델 서빙을 위한 API 개발 경험
- 데이터 엔지니어링 및 MLOps 관련 최신 기술 트렌드 학습 및 적용 능력
- 팀 협업(SW Engineer, BI Engineer) 및 커뮤니케이션 능력(Data Scientist, DevOps 엔지니어)
- 해외 출장 및 근무에 결격 사유 없음
- 우대사항
- 최신 ML/AI(추천/랭킹/최적화) 모델을 위한 데이터 파이프라인 구축 및 운영 경험
- API Gateway(API Gateway, Nginx) 운영 및 최적화 경험
- API를 통한 외부 데이터(Google, 공공 API) 연동 경험
- 데이터 무결성 및 품질 관리(Data Quality) 모니터링 시스템 구축 경험
- 데이터 스트리밍(Kafka) 기반 파이프라인 구축 및 운영 경험
- 주요 RDBMS(MySQL, Oracle, PostgreSQL)의 데이터 모델링과 성능 최적화 경험 및 NoSQL(MongoDB) 연계 개발 경험
- Hadoop 기반 데이터 데이터 마트 구축을 위한 데이터 모델링(정규화, 파티셔닝, 인덱싱) 및 최적화 개발
- 외국어로 업무 진행 가능 (영어·일어·중국어)
- 전형절차
- 서류 전형
- 코딩테스트
- 1차 면접
- 2차 면접
- 레퍼런스 체크 및 처우 협의
- 최종 합격
- 입사