[MySQL] FULLTEXT 인덱스 검색 글자수 제한

 

개요

 

article이 있는 테이블에서 특정 ner를 포함한 기사들을 select 하는 쿼리를 작성 중에 있었다.

 

✅ 여기서 문제 발생

2글자는 검색이 안되고, 3글자부터 검색 가능

 

 

1️⃣ ner 키워드 중 "삼성"을 포함한 기사를 가지고 오는 query

SELECT * FROM articles WHERE MATCH(ner_text) AGAINST('+삼성' IN BOOLEAN MODE);

→ 아무것도 출력 안됨

 

2️⃣ 삼성전자를 포함한 기사를 가지고 오는 query

SELECT * FROM articles WHERE MATCH(ner_text) AGAINST('+삼성전자' IN BOOLEAN MODE);

→ 정상적으로 출력

 

확인

MySQL FULLTEXT 인덱스에서 2글자 이상이 검색이 되지 않는다.

SHOW VARIABLES LIKE 'innodb_ft_min_token_size';
>> 3

• 3글자 이상부터 인덱스 등록하고 있었다.
• 2글자 단어는 인덱스 포함 X

 

해결 방법 1️⃣ : innodb_ft_min_token_size 값 조정

1. MySQL 설정 파일 (예: my.cnf 또는 my.ini) 수정

[mysqld]
innodb_ft_min_token_size=2

 

2. MySQL 재시작

3. FULLTEXT 인덱스 재생성

ALTER TABLE articles DROP INDEX idx_ner_text;
ALTER TABLE articles ADD FULLTEXT INDEX idx_ner_text (ner_text);

 

해결 방법 2️⃣ : WITH PARSER ngram (Innodb 전용)

ALTER TABLE articles
  ADD FULLTEXT INDEX idx_ner_text_ngram (ner_text)
  WITH PARSER ngram;

• ngram 파서는 한글도 글자 단위로 쪼개기 때문에 2글자 단어, 심지어 1글자 단어도 검색 가능

 

진행

mysql config를 수정하는 방법보다는 새로운 인덱스를 생성하는 게 낫다고 판단하여 방법 2️⃣로 진행

 

- 인덱스 생성

ALTER TABLE articles DROP INDEX idx_ner_text;
ALTER TABLE articles
  ADD FULLTEXT INDEX idx_ner_text (ner_text)
  WITH PARSER ngram;

 

- 조회

SELECT * FROM articles WHERE MATCH(ner_text) AGAINST('+삼성' IN BOOLEAN MODE);

 

 

➡️ 2글자도 잘 조회된다!