.png)
오토피디아 2개월 인턴 후기
마케팅 콘텐츠 포스팅의 반복 업무를 Selenium·GCP VM·Docker·Airflow로 자동화했습니다.\nNotion을 CMS 대안으로 활용하고 배포·문서화·사용자 교육까지 경험했습니다.
#Selenium#Docker
1800
국내 IT 기업 기술 블로그 최신 글
새로운 기술 블로그가 추가되었어요
필터 1
데이터 엔지니어: 오토피디아 5개월 인턴 후기
인턴으로 데이터 대시보드, ELT 파이프라인, 검색 엔진, 업무 자동화를 구축한 경험을 공유했습니다. 데이터 품질 관리와 지속적인 파이프라인 유지보수의 중요성을 설명합니다.
#BigQuery#Airflow
1500
딥러닝 모델을 활용하여 미응대 상담 알리미 개발하기
미응대 상담을 중요도별로 분류해 Slack으로 알리는 시스템을 구축했습니다. KoELECTRA의 높은 재현율을 바탕으로 중요한 상담을 우선 처리하도록 지원합니다.
#KoELECTRA#ML
2000
ETL 개념과 ETL 개발 시 고려해야 하는 원칙들
ETL의 추출·변환·적재 흐름과 데이터 웨어하우스에서의 역할을 정리했습니다. 멱등성, 점진 적재, 파티셔닝, 테스트와 모니터링 원칙을 제시했습니다.
#ETL#데이터 웨어하우스
2900
데이터 분석 라이브러리 개발기 (1)
PySpark 분석의 경로·설정 관리와 Notebook·batch 환경 차이를 DevPlay Analytics로 추상화했습니다. SQL 인터페이스와 문서화·테스트를 제공해 일일 200종 이상 테이블 적재에 활용했습니다.
#Python#PySpark
1300
Data-Driven 문화를 만드는 사람들 - 데이터플랫폼셀
Data-Driven 문화를 만드는 사람들 - 데이터플랫폼셀
데이터플랫폼셀은 수집부터 분석·제공까지의 플랫폼을 구축해 데이터 기반 업무를 지원합니다. Kubernetes와 클라우드, 협업 문화를 바탕으로 활용성과 운영 품질을 높이고 있습니다.
#Kafka#Elasticsearch
2900
쿠팡 파트너스
개발자를 위한 서적을 확인해 보세요
이 게시물은 쿠팡 파트너스 활동의 일환으로, 이에 따른 일정액의 수수료를 제공받습니다.
#개발서적#프로그래밍
Airflow를 활용하여 아름다운 데이터 파이프라인 구성하기 / if(kakao)2019
Airflow의 주요 개념과 아키텍처, 데이터 파이프라인 구성 방법을 소개했습니다. 유사 워크플로 관리 도구와 비교해 카카오페이지의 선택 및 운영 방식을 설명했습니다.
#Airflow#ETL
000