반응형
bm25
-
BM25 알고리즘이란?Search & AI/Search 2024. 4. 11. 13:05
BM25 알고리즘은 정보 검색 분야에서 문서의 관련성을 평가하기 위해 사용되는 랭킹 함수입니다. 이 알고리즘은 사용자의 검색 쿼리에 가장 잘 매치되는 문서를 찾아 순위를 매기는 데 사용됩니다. BM25는 TF-IDF(Term Frequency-Inverse Document Frequency) 모델을 개선한 것으로, 문서 내 특정 단어의 빈도수와 문서집합 전체에서 그 단어가 얼마나 일반적인지를 고려하여 문서의 관련성을 계산합니다. 어디에 쓰이는가? BM25 알고리즘은 주로 검색 엔진, 문서 분류, 자연어 처리 등의 분야에서 널리 사용됩니다. 이 알고리즘은 사용자가 입력한 검색어와 관련된 문서를 식별하고, 가장 관련성이 높은 문서부터 낮은 순으로 정렬하여 결과를 제공하는 데 중요한 역할을 합니다. 경쟁 알고..