

미리디의 데이터 혁신 | “폭발적인 성장을 이끄는 데이터브릭스 기반 데이터 문화 구축 이야기”
데이터브릭스를 중심으로 데이터 아키텍처를 재설계해 신뢰성과 운영 효율을 높인 사례를 소개했습니다. 또한 전사 구성원이 데이터를 더 쉽게 활용하는 문화로 확장한 과정을 공유했습니다.
#Databricks#데이터 분석
2300


데이터브릭스를 중심으로 데이터 아키텍처를 재설계해 신뢰성과 운영 효율을 높인 사례를 소개했습니다. 또한 전사 구성원이 데이터를 더 쉽게 활용하는 문화로 확장한 과정을 공유했습니다.

데브시스터즈가 게임 런칭 상황에 맞는 준실시간 지표 서비스를 도입한 과정을 소개했습니다. Kafka, Spark Streaming, Kibana를 활용해 정확도와 비용, 운영성을 함께 맞추려는 시도를 설명했습니다.


아자르의 개인정보 삭제 정책 시스템을 이벤트 기반으로 설계한 사례를 소개했습니다. 예약부와 처리부를 분리하고 Kafka, Databricks로 무손실 처리와 백필을 지원했습니다.


커머스 유저 데이터를 기반으로 Activation과 Retention 대시보드를 기획하고 자동화한 사례를 소개했습니다. 데이터 파이프라인 설계, 신선도 관리, Tableau/Databricks 활용 방식까지 함께 다뤘습니다.

무신사 테크가 Databricks Data+AI Summit 2023 참석 후기를 공유했습니다. 생성형 AI, 데이터 플랫폼, 재해복구 등 실무 인사이트를 정리했습니다.


Dash를 도입해 데이터 조회, 가공, 렌더링을 역할별로 분리하고 연결하는 구조를 만들었습니다. 또한 Mixin과 압축을 활용해 유지보수성과 데이터 전송 효율을 개선했습니다.