Data Engineer
About
SM하이플러스는 2007년 대한민국 최초로 하이패스 선불카드를 선보인 이래, 현재 연간 600만 명이 이용하는 국내 1위 하이패스 카드 운영사입니다.
국내 전자금융업 최초로 AWS All-in Migration을 성공적으로 마친 SM하이플러스는 이제 데이터 기반 AX(AI Transformation) 및 모빌리티 페이먼트 플랫폼으로의 거대한 도약을 이뤄내고 있습니다.
Multi-Cloud 기반의 엔터프라이즈 모던 데이터 스택을 구축하고, 대용량 트래픽 처리 및 AI/LLM 파이프라인 도입이라는 강력한 넥스트 스텝(Next Step)을 함께 설계해 나갈 데이터 엔지니어분을 모십니다.
Responsibilities
기업의 비즈니스 의사결정에 신뢰성을 부여하고, 하이브리드 멀티 클라우드 기반 데이터 플랫폼의 가용성과 무결성을 책임집니다.
• 멀티 클라우드 환경 간 데이터 파이프라인 및 흐름 설계
AWS 및 GCP 간 데이터 이관/연동 파이프라인을 고도화하여 효율적이고 안정적인 데이터 흐름 구축
• 대규모 데이터 플랫폼 운영 및 자동화
24시간 안정적인 분산 파이프라인 운영을 위한 오케스트레이션 및 장애 자동 복구(HA) 시스템 관리
• 데이터 거버넌스 및 품질/보안 관리
데이터 유출 방지를 위한 인프라 보안 체계 구축 및 저장 데이터의 무결성·정확성을 검증하는 거버넌스 체계 수립
• 시스템 성능 최적화 및 운영 효율화
DW/Data Lake 저장 공간 및 쿼리 성능 최적화, 반복 업무 자동화 및 핫 스팟 관증성(Monitoring) 강화
• 분석/BI 환경 및 서비스 협업 지원
Analytics/BI 툴 연동을 위한 추출 환경 설계 및 서비스 기획/운영 팀의 데이터 요구사항 수렴 및 구현
Requirements
데이터는 서비스의 결과물이 아닌 모든 비즈니스 판단의 근간이라는 확고한 기술적 철학과 책임감을 최우선으로 생각합니다.
• 데이터 엔지니어링 관련 경력 5년 이상이신 분
• Python(PySpark) 및 대규모 데이터 처리를 위한 고도화된 SQL(Window Function, 성능 튜닝 등) 활용 역량을 갖추신 분
• Apache Airflow 분산 환경(Scheduler, Worker, Redis Sentinel HA 등)의 오케스트레이터 운영 및 트러블슈팅 경험이 있으신 분
• dbt를 활용한 SCD 1 & 2 데이터 모델링 및 데이터 무결성 검증 체계 운영 경험이 있으신 분
• Redshift(RA3) 또는 BigQuery 환경에서 WLM 관리, 쿼리 플랜 분석, 지연 쿼리 최적화를 직접 수행해 보신 분
• S3 SSE-KMS, IAM Role, VPC 보안 그룹 등 클라우드 데이터 보안 인프라 관리에 대한 깊은 이해도를 갖추신 분
• 데이터 품질 모니터링 및 실시간 알림 시스템을 직접 구축해 본 경험이 있으신 분
Preferred
• Claude(Sonnet) 등 LLM을 활용한 차량 정보 등 비정형 데이터 정제 및 파이프라인 구축 경험
• Apache Iceberg 기반 증분 데이터 처리 및 데이터 레이크하우스(Data Lakehouse) 아키텍처 설계 경험
• Apache Kafka 기반 실시간 메타데이터 Ingestion 및 Datahub를 활용한 전사 데이터 거버넌스 구축 경험
• GitLab 및 GitLab Runner를 이용한 데이터 파이프라인 CI/CD 구축 및 무중단 배포 관리 경험
• 데이터 정합성 및 무결성 관리에 대한 본인만의 확고한 설계 철학을 보유하신 분
Benefits
• 성장지원
온·오프라인 직무교육 및 사외 교육, 세미나, 컨퍼런스 참가 지원
• 보상 및 복지
업적우수/장기근속 포상
생일축하금 및 조기퇴근 지원
• 여가 및 문화
그룹사 호텔·리조트에서 사용가능한 복지포인트 및 바우처 제공
사내 동호회 운영 및 활동비 지원
Year-end Party 등 사내 행사 운영
• 가족친화 지원
육아휴직 및 육아기 근로시간 단축제도
자녀 학자금 지원
• 소통하는 조직문화
타운홀 미팅을 통한 경영진과의 자유로운 소통
수평적이고 열린 조직문화 지향