Config의 Amazon EKS Spot 기반 대규모 RFM 데이터 파이프라인 구축
EKS와 Spot, RabbitMQ, KEDA, Karpenter를 결합해 대규모 데이터 전처리 파이프라인을 구축했습니다. 단일 큐 병목을 없애 비용을 크게 줄이고 처리 시간도 수 일에서 수 시간으로 단축했습니다.
#Amazon EKS#Spot Instances
4600
국내 IT 기업 기술 블로그 최신 글
새로운 기술 블로그가 추가되었어요
필터 1
Spring Cloud Config & Bus-Refresh 도입기
여러 MSA의 공통 설정 변경을 재배포 없이 반영하기 위해 Spring Cloud Config와 Bus-Refresh를 도입했습니다. 그 결과 배포 시간이 크게 줄고 운영 중 설정 변경 대응이 쉬워졌습니다.
#Spring Cloud Config#Spring Cloud Bus
10500
RabbitMQ Classic Queue 메모리 장애와 Quorum Queue 전환기
대량 쿠폰 발급 중 RabbitMQ Classic Queue 메모리 장애와 동기화 실패 원인을 분석했습니다. 긴급 복구 후 버전 업그레이드와 Quorum Queue 전환으로 안정성을 높였습니다.
#RabbitMQ#AWS
6300
WebFlux & Project Reactor 기반, 고성능 실시간 웹한글 문서 편집 시스템 전환기
실시간 웹한글 편집의 I/O 병목과 블로킹 한계를 해결하기 위해 WebFlux와 Project Reactor로 전환했습니다. 블로킹 작업 분리, 커스텀 스케줄러, graceful shutdown, Context 추적으로 안정성과 관찰성을 높였습니다.
#WebFlux#Project Reactor
10400
카드 청구금액 알림 서비스의 홀로서기 대모험
카드 청구금액 알림 서비스의 홀로서기 대모험
오픈뱅킹 단일 시스템에 있던 카드 청구금액 알림 서비스를 별도 시스템으로 분리한 이관 과정을 공유했습니다.외부 의존성과 재처리, 검증 전략 조정 과정을 통해 안정적으로 전환한 경험을 정리했습니다.
#REST API#Spring WebFlux
4400
최적의 메시지 브로커를 찾아서
프리즘의 메시지 브로커를 SQS, Kafka, RabbitMQ 순으로 바꾼 이유를 정리했습니다. 요구 사항에 맞는 전달 보장과 스케일링, 분배 특성이 선택의 핵심이었습니다.
#API#SQS
3900
쿠팡 파트너스
개발자를 위한 서적을 확인해 보세요
이 게시물은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다.
#개발서적#프로그래밍
올리브영 초대량 쿠폰 발급 시스템 개선기
대량 쿠폰 발급을 Direct Exchange 기반 구조에서 Fanout Exchange 기반 분산 구조로 개선했습니다. 그 결과 작업 시간을 크게 줄이고 백오피스 의존성을 낮춰 운영 안정성을 높였습니다.
#RabbitMQ#Exchange
5600
다나와의 상품 색인 파이프라인
다나와의 상품 색인 파이프라인
다나와 상품 색인 파이프라인을 logstash로 이관해 유지보수성을 높이고 MQ 의존성을 줄였습니다. 1G 로그 처리 테스트에서는 기존 대비 처리 시간이 크게 줄어 성능 개선도 확인했습니다.
#Elasticsearch#Logstash
2300
쿠폰 발급 RabbitMQ도입기
Redis Worker의 한계를 보완하기 위해 RabbitMQ를 도입한 사례를 소개했습니다. 행사성 트래픽과 대량 발급 처리에서 안정성과 운영 편의성을 개선했습니다.
#RabbitMQ#Redis
4300
RabbitMQ 를 이용한 서버-클라이언트 양방향 통신 구현
RabbitMQ 를 이용한 서버-클라이언트 양방향 통신 구현
RabbitMQ로 서버와 클라이언트 간 양방향 통신을 구현했습니다. WIPPY와 MOCI의 통신 이슈에 적용해 다양한 용도로 활용했습니다.
#RabbitMQ#양방향 통신
3000
RabbitMQ로 메시지 손실 최소화 하는 법(1)
RabbitMQ로 메시지 손실 최소화 하는 법(1)
메시지 처리 시스템 도입을 위해 필요한 솔루션 요구사항을 정리했습니다. RabbitMQ의 신뢰성, 관리성, 라우팅과 클러스터링 장점을 소개합니다.
#RabbitMQ#메시징
2500