목록 보기
Mecab과 Nori, Fastcat 플러그인 색인 성능 비교
백엔드

Mecab과 Nori, Fastcat 플러그인 색인 성능 비교

다나와
다나와
2023년 1월 5일

두줄요약

Elasticsearch 한국어 분석기 Mecab-Ko, Nori, Fastcat의 색인 성능을 비교했습니다. 사전 수를 줄이면 색인 시간이 줄어들고, Nori는 상대적으로 느렸습니다.

핵심 내용

  • Elasticsearch 한국어 분석기 Mecab-Ko, Nori, Fastcat의 색인 성능 비교
  • Fastcat 기반 상품명 분석기와 오픈소스/공식 플러그인 간 유지보수성 관점의 재검토
  • Mecab-Ko와 Fastcat의 색인 성능 유사, Nori는 상대적으로 느린 결과

성능/운영 포인트

  • 분석기별 300만건, 700만건 문서 인덱스로 벤치마크 수행
  • 색인 속도 향상을 위한 별도 옵션 없이 기본 성능 비교
  • 사전 크기 축소 시 색인 소요 시간 감소

적용해볼 점

  • 상품 검색 중심 환경에서는 불필요한 품사 사전 제거 검토
  • 사전 최소화로 색인 성능 개선 가능성 확인
  • 기존 분석기 코드의 리팩토링과 유지보수 개선 검토

다음 읽기

#Elasticsearch 주제를 이어서 읽기

Elasticsearch 3TB의 인덱스를 reindex 하는 방법

Elasticsearch 대용량 인덱스 reindex에서 속도와 안정성을 높이는 설정 조정 사례를 다뤘습니다. replica 분리, refresh 비활성화, throttling과 복구 속도 제한으로 장애를 줄였습니다.

다나와
다나와
백엔드

댓글 0

댓글을 작성하려면 로그인이 필요합니다.

댓글을 불러오는 중...