Trino resource optimize on YARN
YARN 환경의 Trino 리소스를 재조정해 장비 증설 없이 가용 메모리를 늘리는 과정을 정리했습니다. AM Container와 RESERVED Resource를 고려해 Worker 중심으로 설정을 최적화했습니다.
#Trino#YARN#query.max-memory-per-node
3300
모든 블로그
대표 인기 포스트Backoffice AI Agent 구축기 — RAG+MCP 기반 플레이스AI 특화 지식 검색 시스템212 조회212 조회 백엔드 백엔드
백엔드
백엔드
백엔드
네이버 플레이스
도메인medium.com
주요 카테고리 백엔드 · AI · DevOps
활동 요약
- 최근 30일
- 0개
- 평균 조회
- 43
- 누적 조회
- 563
- 전체 글
- 13개
- 마지막 발행
- 2025. 11. 13.
네이버 플레이스 기술 블로그 글 (5)
업데이트 압축률 67%, 플레이스 리뷰 tagging 시스템 개선경험
태깅 파이프라인을 원본 저장, 로직 분리, write buffer로 재설계해 업데이트 부하를 줄였습니다. 운영툴 통합과 수동 태그 보존으로 관리성과 안정성도 함께 높였습니다.
#Kafka#DB#Airflow
3800
ML gpu model server 성능을 유지하며 cpu server로 전환한 경험 공유
GPU 모델 서버를 CPU 서버로 전환하면서 성능 저하를 막기 위해 worker, thread, IPEX, KD를 함께 최적화했습니다. 그 결과 서비스 품질을 유지하며 GPU 자원을 절감했습니다.
#ML#server#Kubernetes
1900
DataHub Opensource에 Protobuf Multi-level nested message support 기능 PR 작성 후기
DataHub의 Protobuf nested message 주석 미표시 문제를 원인 분석 후 코드와 테스트로 수정했습니다. 오픈소스 기여 과정에서 Slack 커뮤니케이션과 Checkstyle 대응도 함께 경험했습니다.
#DataHub#Protobuf#Apache
1400
효율적인 하둡 플랫폼 운영을 위한 “Hive 사용량 통계 레포트” 개발기
Hive 사용량 통계를 수집해 하둡 플랫폼 운영 효율을 높인 개발 사례를 소개했습니다. 크롤링 한계를 로그 분석과 실시간 처리 구조로 개선하고 Iceberg 적재 방식도 조정했습니다.
#Hive#Hadoop#Selenium
2300