텍스트 검색 토토 핫는 원시 문서 텍스트를 분할 할 책임이 있습니다토큰및 가능한 유형 세트가 파서 자체에 의해 정의되는 각 토큰 유형을 식별합니다. 파서는 텍스트를 전혀 수정하지 않으며 단순히 그럴듯한 단어 경계를 식별합니다. 이 제한된 범위로 인해 사용자 정의 사전보다 응용 프로그램 별 커스텀 파서가 필요하지 않습니다. 현재PostgreSQL광범위한 애플리케이션에 유용한 것으로 밝혀진 단 하나의 내장 토토 핫를 제공합니다.

내장 된 토토 핫의 이름이 지정되었습니다PG_CATALOG.DEFAULT. 23 개의 토큰 유형을 인식합니다.표 12.1.

파서가 같은 텍스트에서 겹치는 토큰을 생성 할 수 있습니다. 예를 들어, 하이픈으로 된 단어는 전체 단어와 각 구성 요소로보고됩니다.

ts_debug의 별명, 설명, 토큰 선택 ( 'foo-bar-beta1');
      별칭 |               설명 |     토큰
------------------------------------------------------------------------------------------------------------------------------
 numhword | 하이픈으로 된 단어, 문자 및 숫자 | foo-bar-beta1
 hword_asciipart | 하이픈으로 된 단어 부품, 모든 ascii | foo
 blank | 공간 기호 | -
 hword_asciipart | 하이픈으로 된 단어 부품, 모든 ascii | 술집
 blank | 공간 기호 | -
 hword_numpart | 하이픈으로 된 단어 부분, 문자 및 숫자 | 베타 1

이 동작은 전체 복합 단어와 구성 요소 모두에 대한 검색이 작동하도록 허용하기 때문에 바람직합니다. 다음은 또 다른 유익한 예입니다.

ts_debug에서 별명, 설명, 토큰을 선택하십시오 ( 'http://example.com/stuff/index.html');
  별칭 |  설명 |            토큰
----------+------------------------------------------------
 프로토콜 | 프로토콜 헤드 | http : //
 url | url | example.com/stuff/index.html
 호스트 | 호스트 | example.com
 url_path | URL 경로 | /stuff/index.html