목록Ngram (1)

아빠는 개발자

[MySQL] Ngram

MySQL의 fulltext 검색 알고리즘 일단 Ngram 이란??N-gram은 통계학 기반의 언어 모델 중 하나N-gram 언어 모델은 이처럼 다음 단어를 예측할 때 문장 내 모든 단어를 고려하지 않고 특정 단어의 개수(N)만 고려 즉, N-gram은 N개의 연속적인 단어의 나열을 하나의 묶음(=token)으로 간주 "오늘 점심 추천 메뉴: 파스타, 피자"  모델명구현 결과1Unigram(N=1)오늘, 점심, 추천, 메뉴, 파스타, 피자2Bigram(N=2)오늘 점심, 점심 추천, 추천 메뉴, 메뉴 파스타, 파스타 피자3Trigram(N=3)오늘 점심 추천, 점심 추천 메뉴, 추천 메뉴 파스타, 메뉴 파스타 피자44-gram(N=4)오늘 점심 추천 메뉴, 점심 추천 메뉴 파스타, 추천 메뉴 파스타 피..
Database 2024. 1. 7. 01:47
이전 Prev 1 Next 다음