[클로바 스튜디오 Cookbook] LLM을 위한 PDF-to-Markdown 문서 전처리 가이드

AI

[클로바 스튜디오 Cookbook] LLM을 위한 PDF-to-Markdown 문서 전처리 가이드

네이버 클라우드 플랫폼

네이버 클라우드 플랫폼2026년 1월 29일

두줄요약

RAG 성능을 높이기 위한 PDF-to-Markdown 전처리 가이드를 소개했습니다. 문서 구조를 정제해 LLM 친화적인 입력을 만드는 방법을 다뤘습니다.

핵심 내용

RAG 성능을 좌우하는 문서 전처리의 중요성
PDF를 Markdown으로 변환해 LLM이 구조를 이해하기 쉬운 입력으로 정제
토큰 효율과 응답 안정성 측면에서 Markdown의 이점

적용해볼 점

비정형 문서 입력 전 구조 정리 우선 검토
표, 레이아웃 등 복잡한 문서의 Markdown 변환 고려
LLM 애플리케이션에서 데이터 품질 중심 전처리 설계

LLM Research Engineer (Pre-training) (신입/경력)
카카오 · 신입·경력 · 판교
Kanana 사전학습을 위해 LLM 구조·학습·데이터 최적화와 대규모 데이터 수집·생성 기술을 연구·개발합니다. 관련 석사 이상 또는 프로젝트 경험과 Model Parallel 기반 모델 학습 경험이 필요합니다.
필요 기술Large Language Model (LLM)KananaMixture of ExpertsGated Delta NetKimi LinearFP8 trainingDataset mixture searchModel Parallel
LLM Research Engineer (Post-training) (신입/경력)
카카오 · 신입·경력 · 판교
Kanana 언어모델의 Post-training 데이터·환경·학습 파이프라인 및 효율화 연구와 분산 학습 코드 구현·최적화를 담당합니다. 관련 석사 또는 프로젝트 경험과 분산처리 기반 언어모델 학습, SFT·RL 기반 LLM Post-training 경험이 필요합니다.
필요 기술LLMPost-trainingSFTRLTorch distributedDeepSpeedRayslime
LLM Engineer (Optimization)
42dot · Pangyo (Software Dream Center), South Korea
LLM 추론 엔진·런타임과 모델 최적화를 개발해 GPU 클러스터부터 엣지·온디바이스 환경까지 지연시간·처리량·메모리 효율을 개선합니다. 관련 경력 3년 이상과 LLM 엔진/AI 런타임 개발, GPU·CUDA·병렬 컴퓨팅 및 최적화 기술 이해가 필요합니다.
필요 기술CUDAPyTorchONNXTensorRTPythonC/C++NVIDIA Nsight SystemsNsight Compute

네이버 계열사 채용6건

채용 사이트에서 전체 보기

다음 읽기

#RAG 주제를 다룬 다른 회사 글

RAG 시스템을 위한 문서 전처리 가이드: AI가 이해하기 쉬운 형태로 만들기

RAG 시스템에서 문서 전처리가 검색 정확도를 좌우한다는 점을 설명했습니다. HTML, PDF, Excel, 이미지별로 적절한 정제와 로더 선택 방법을 정리했습니다.

데보션

댓글 0개

댓글을 작성하려면 로그인이 필요합니다.

댓글을 불러오는 중...