목록 보기
How we pipe data
백엔드

How we pipe data

버즈빌
버즈빌
2018년 7월 31일

두줄요약

여러 국가의 유저 행동 및 광고 데이터를 다양한 저장소에서 수집하는 환경을 소개했습니다. 분석과 활용을 위해 분산 데이터를 한곳에 모으는 필요성을 설명합니다.

문제 상황

  • 30개국 1,700만 이상 유저의 잠금화면 행동·광고 노출·클릭 데이터 수집
  • MySQL, DynamoDB, Redis, S3 등 여러 저장소에 분산된 이종 데이터

적용해볼 점

  • 분석과 활용을 위한 분산 데이터의 중앙 집계 필요성
  • 데이터 소스와 저장소 특성을 고려한 데이터 파이프라인 설계

다음 읽기

#MySQL 주제를 이어서 읽기

How We Pipe Data

여러 저장소에 분산된 사용자·광고 활동 데이터를 Redshift로 통합하는 파이프라인을 소개했습니다. 컬럼형 저장, 빠른 적재, 수평 확장성을 핵심 선택 이유로 설명합니다.

버즈빌
버즈빌
백엔드

댓글 0개

댓글을 작성하려면 로그인이 필요합니다.

댓글을 불러오는 중...