포털 적용 사례로 알아본 NER 개념과 활용법
AI
포털 적용 사례로 알아본 NER 개념과 활용법
두줄요약
NER은 비정형 텍스트에서 개체명을 분류해 문맥에 맞는 검색·뉴스 분류에 활용하는 기술입니다. 포털 사례를 바탕으로 임베딩, BiLSTM, CRF로 구현 흐름을 설명했습니다.
핵심 내용
- NER을 비정형 텍스트에서 인명, 지명, 시간 등 개체명을 미리 정의된 카테고리로 분류하는 기술로 설명
- 포털 검색에서 동일한 단어라도 문맥에 따라 인명, 지명 등으로 해석해 검색 결과나 뉴스 분류에 활용하는 사례 소개
- 구현 구조로 임베딩, BiLSTM, CRF를 사용한 개체명 인식 흐름 설명
- fastText 단어 임베딩, 형태소 임베딩, 의미태깅 임베딩을 결합하고 CRF로 문맥 기반 분류 정확도를 높이는 방식 정리