EMR, YARN 기반 Spark를 Self-hosted Kubernetes로 전환하는 내용을 소개했습니다. 데이터 분석환경 컴퓨팅을 Kubernetes 중심으로 재구성하는 방향을 다뤘습니다.
쿠버네티스(Kubernetes) 엔지니어
카카오뱅크
카카오뱅크 Kubernetes 표준 환경 구축·운영, 클러스터 프로비저닝·형상 관리, CI/CD 설계와 모니터링·장애 대응을 담당합니다. Go·Python·Shell 자동화 경험과 Linux·Cloud Native, IaC·GitOps 기반 자동화 시스템 구성 경험이 필요합니다.
[PaaS개발실] Kubernetes Engine 개발자 영입
카카오엔터프라이즈 · 경력 3년 이상 · 카카오엔터프라이즈
KakaoCloud Kubernetes Engine의 설계·개발·운영과 멀티테넌트 Kubernetes 클러스터 프로비저닝·자동화, 인프라 연동 및 장애 대응을 담당합니다. 서버·시스템 소프트웨어 개발·운영 경험과 Kubernetes 운영·모니터링·트러블슈팅 경험이 필요합니다.
Data Engineer
쏘카 · 경력 5년 이상 · 쏘카
전사 에이전트가 신뢰할 데이터를 활용하도록 CDC 기반 실시간 레이크하우스와 데이터 파이프라인을 설계·운영하고, 데이터 품질·접근 통제·자동화를 구축합니다. 프로덕션 파이프라인 설계·운영 경험과 Python·SQL, Airflow, BigQuery 또는 Spark 활용 역량이 필요합니다.
[최초채용] [초기멤버] Forward Deployed Engineer (BFS Founder Team)
뱅크샐러드 · 경력 5년 이상
금융솔루션전문가의 상담·영업 시스템과 AI OS를 고도화하며, 현장 문제 진단부터 프로토타입·운영 환경 구현 및 사업 지표 검증까지 주도합니다. 프로덕션 수준의 코드로 완결된 제품을 만들고 정리되지 않은 문제를 끝까지 해결한 경험이 필요합니다.
[Frontier] AI Native Server Engineer (AI 네이티브 서버 엔지니어)
뱅크샐러드 · 경력 5년 이상
AI Agent를 활용해 운영 작업과 코드 리뷰를 자동화하고, 대용량 금융 트래픽을 처리하는 고성능·고가용성 API 및 백엔드 서비스를 개발합니다. Go 또는 Java/Kotlin 기반 서버 개발 경험과 AI Agent의 실무 적용 경험이 필요합니다.
#Spark 주제를 이어서 읽기
EMR·YARN 기반 Spark 분석 환경을 self-hosted Kubernetes로 이전한 과정을 소개했습니다. Glue 연동과 S3 commit 문제를 해결해 피크 시간 기준 약 45% 비용을 절감했습니다.
