Transactional Outbox 패턴으로 메시지 발행 보장하기
Transactional Outbox 패턴으로 DB 트랜잭션과 메시지 발행의 원자성을 보완하는 방법을 소개했습니다. 리디는 Polling Publisher와 락 조합, 지연 삭제로 Kafka 메시지 신뢰성과 운영 성능을 함께 개선했습니다.
#Kafka#MySQL
4200
국내 IT 기업 기술 블로그 최신 글
필터 1
중앙집중식 syslog 설정 및 관제
중앙집중식 syslog를 어떻게 관리하고 모니터링하는지 소개했습니다. 알람을 어떤 기준으로 분류하는지도 함께 설명했습니다.
#모니터링#logging
4000
외부셀러 - 외부 스파크성 트래픽으로부터 내부 시스템을 보호하는 방법 1탄
외부셀러의 동기식 API 구조를 비동기 이벤트 기반으로 분리해 내부 시스템 보호 방안을 소개했습니다. AWS MSK와 partition key, retry 로직으로 스파이크 트래픽 대응과 순서 보장을 다뤘습니다.
#Kafka#비동기
4900
Airflow Task failed Alert Mail 폭탄 회피하기
Airflow에서 동일 원인으로 반복 발송되는 Task 실패 알림을 하나로 통합하는 방법을 다루었습니다. DAG run의 Task Instance와 로그를 활용해 중복 메일 노이즈를 줄이는 구현을 소개했습니다.
#Airflow#ETL
3300
사이트 신뢰성에 대한 지표는 어떻게 구성할까? (Feat. SRE)
서비스 전반의 모니터링과 별개로, 사이트 신뢰성을 위한 서비스 레벨 지표와 목표 범위를 고민한 글입니다. SRE 관점에서 Request 기준의 신뢰성 측정 체계를 구성하려는 방향을 다뤘습니다.
#SRE#모니터링
3700
모니터링은 마틴 파울러처럼: Domain-Oriented Observability 도입기
빠르게 변하는 환경에서 모니터링 코드가 비즈니스 코드에 섞이지 않도록 Domain-Oriented Observability를 도입한 사례입니다. 마틴 파울러 블로그의 개념을 바탕으로 코드 오염을 줄이는 방향을 다뤘습니다.
#모니터링
1900
Velopers 추천광고
쿠팡 파트너스
개발자를 위한 인기 상품을 확인해 보세요
이 게시물은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다.
#개발자#노트북#컴퓨터
후기 서비스 AWS Opensearch 도입기
후기 서비스의 조회 병목을 해결하기 위해 AWS Opensearch를 도입한 사례를 정리했습니다. CQRS와 이벤트 기반 구조로 전환하고 성능 테스트와 모니터링까지 함께 적용했습니다.
#OpenSearch#검색
3800
다나와의 상품 색인 파이프라인
다나와의 상품 색인 파이프라인
다나와 상품 색인 파이프라인을 logstash로 이관해 유지보수성을 높이고 MQ 의존성을 줄였습니다. 1G 로그 처리 테스트에서는 기존 대비 처리 시간이 크게 줄어 성능 개선도 확인했습니다.
#Elasticsearch#Logstash
2300
킁킁!킁! 어디서 사기 냄새 안나요? : FDS 시스템에 AI 적용하기
킁킁!킁! 어디서 사기 냄새 안나요? : FDS 시스템에 AI 적용하기
카카오뱅크 FDS에 AI를 적용한 과정과 기존 Rule 기반 시스템의 한계를 다뤘습니다. 데이터 파이프라인, 실시간 서빙, 모니터링, 협업 구조까지 함께 소개했습니다.
#ML#streaming
5000
사내 데이터 플랫폼 개발, 처음이라면?
사내 데이터 분석 플랫폼 QIP를 처음부터 개발한 협업 프로세스를 PM 관점에서 정리했습니다. 요구사항 수렴부터 프로토타입, QA, 교육, 운영 정립까지의 흐름과 시행착오를 소개했습니다.
#데이터 분석#프로젝트 관리
3300
결빙주의! 티맵은 도로 상황 정보를 어떻게 빠르게 알까 - 22편 - 티맵의 도로 상황 정보 수집, 가공, 표출 시스템
결빙주의! 티맵은 도로 상황 정보를 어떻게 빠르게 알까 - 22편 - 티맵의 도로 상황 정보 수집, 가공, 표출 시스템
티맵의 도로 상황 정보가 어떻게 수집되고 가공되어 표출되는지 설명한 글입니다. 직접 수집 정보와 관계 기관 연동 정보를 나눠 빠르게 안내하는 흐름을 다뤘습니다.
#system#traffic
3400
픽업전용 장바구니
픽업 주문 진입 경로를 장바구니로 모아 고객 접근성을 높인 개발 사례입니다. 매장 선택과 렌더링 방식을 개선하고, 모니터링까지 구성했습니다.
#SSR#CSR
4100
RDS 모니터링을 위한 나만의 CloudWatch Dashboard 만들기
AWS RDS 모니터링을 위해 CloudWatch Dashboard를 직접 구성하는 방법을 소개했습니다. 가로 임계값과 이상 탐지를 더해 상태 판단을 쉽게 만드는 과정을 설명했습니다.
#AWS#RDS
2600
Meet Coupang’s Machine Learning Platform
쿠팡의 머신러닝 플랫폼이 개발부터 배포, 모니터링까지 전 과정을 어떻게 지원하는지 소개했습니다. 노트북, 피처 스토어, 분산 학습, 추론 서빙, 하이브리드 클러스터 운영이 핵심입니다.
#ML#Kubernetes
1600