국내 IT 기업 기술 블로그 최신 글

필터 1
[24. 7. 31] 생명을 구하는 AI 기술을 개발하는 형제 Researcher, Chris와 Destin을 소개합니다
AITRICS
기타

[24. 7. 31] 생명을 구하는 AI 기술을 개발하는 형제 Researcher, Chris와 Destin을 소개합니다

에이아이트릭스의 형제 연구원 Chris와 Destin이 의료 AI 연구와 팀 협업 경험을 소개했습니다. 환자 상태 예측과 병리 영상 연구를 통해 실제 의료 현장에 기여하는 이야기를 전했습니다.

#ML#EHR
1100
GDPR 비용 절감을 위한 데이터 구조 변경 및 클러스터 최적화
삼성
데브옵스

GDPR 비용 절감을 위한 데이터 구조 변경 및 클러스터 최적화

GDPR 비용 절감을 위해 데이터 구조를 변경하고 AWS EMR 클러스터를 최적화한 경험을 다뤘습니다. 비용 발생 구조를 줄이기 위한 대응 사례를 공유했습니다.

#AWS#EMR
1800
Spark 6편: Yarn Resource Manager 라벨링
베스핀글로벌
백엔드

Spark 6편: Yarn Resource Manager 라벨링

YARN 라벨링으로 Spark의 AM과 Executor를 서로 다른 노드에 배치하는 방법을 소개했습니다. EMR에서 Spot Instance 사용 시 발생하는 장애와 비용 문제를 완화하는 구성도 설명했습니다.

#Spark#Yarn
4500
클라우드 서비스 사용량 관리를 통한 운영 비용 최적화
쿠팡
데브옵스

클라우드 서비스 사용량 관리를 통한 운영 비용 최적화

클라우드 사용량을 체계적으로 분석하고 도메인 팀과 협업해 운영 비용을 최적화한 사례를 다루었습니다. 비프로덕션 자동화, 인스턴스 조정, 스토리지 전환으로 큰 폭의 비용 절감 효과를 거두었습니다.

#AWS#S3
2900
Spark on Kubernetes로 가자!
뱅크샐러드
데브옵스

Spark on Kubernetes로 가자!

EMR·YARN 기반 Spark 분석 환경을 self-hosted Kubernetes로 이전한 과정을 소개했습니다. Glue 연동과 S3 commit 문제를 해결해 피크 시간 기준 약 45% 비용을 절감했습니다.

#Spark#Kubernetes
100