절취선 블로그

스핑크스 검색 문제 개선 SPHINX 검색 엔진이 가지는 가장 큰 문제는 노이즈 문제이다. 정확이 말하면 NGRAM이 가진 문제인데 검색 기능을 구현함에 있어서 노이즈 문제를 해결해야했다. NGRAM에 대한 정확도를 높이기 위해서는 2가지 방법이있다. N 의 수를 늘리자 TOKEN을 많이 가져가자 (검색 단어를 많이 입력하자) ex) "산에서 들개" 의도) “산에서 들개 떼를 만났다” 등산 사고 민원 예고 울렸다... 결과) “산에서 들개 떼를 만났다” 등산 사고 민원 예고 울렸다... BECK-END인 내가 할 수 있는 방법은 2번 방법이라고 생각했고 사용자가 의도한 정보를 획득하기 위해 검색결과가 저장된 Log를 분석하여 해결하고자 했다. LOG 분석 1. 이용자는 문장보다 키워드를 많이 사용한다. ..

SPHINX What is sphinx ?? Sphinx is an open source full text search server, designed from the ground up with performance, relevance (aka search quality), and integration simplicity in mind. Sphinx lets you either batch index and search data stored in an SQL database, NoSQL storage, or just files quickly and easily — or index and search data on the fly, working with Sphinx pretty much as with a da..