Ngram Algorithm
Ngram Algorithm SPHINX SQL를 서비스를 준비하면서 스핑크스가 가진 특이한 검색 방법에 고민을 많이했다. N-GRAM 개념 N-gram은 통계학 기반의 언어 모델중 하나로 다음 단어를 예측할 때 문장에서의 모든 단어를 고려하지 않고 특정 단어(TOKEN)의 개수(N)만 고려한다. ex) “산에서 들개 떼를 만났다” 등산 사고 민원 예고 울렸다 N 모델명 구현 1 Unigram “산에서 / 들개 / 떼를 / 만났다” / 등산 / 사고 / 민원 / 예고 / 울렸다 2 Bigram “산에서 들개 / 떼를 만났다” / 등산 사고 / 민원 예고 / 울렸다 3 Trigram “산에서 들개 떼를 / 만났다” 등산 사고 / 민원 예고 울렸다 4 4-gram “산에서 들개 떼를 만났다” / 등산 사고 ..
카테고리 없음
2022. 10. 28. 21:13
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- docker
- java
- nginx
- 디자인패턴
- 면접
- OOP
- 매트랩
- Algorithm
- 그래프
- 자격증
- 스프링부트
- springboot
- 알고리즘
- ajax
- 스프링
- kakao
- C언어
- spring-cloud
- Matlab
- Solid
- interview
- security
- 릿코드
- CS
- 자바
- Spring
- 백준
- 수학
- 프로그래머스
- JPA
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | ||||||
2 | 3 | 4 | 5 | 6 | 7 | 8 |
9 | 10 | 11 | 12 | 13 | 14 | 15 |
16 | 17 | 18 | 19 | 20 | 21 | 22 |
23 | 24 | 25 | 26 | 27 | 28 |
글 보관함