12.5. 토토 사이트

텍스트 검색 파서는 원시 문서 텍스트를 분할하는 역할을 담당합니다.토큰그리고 각 토큰의 유형을 식별합니다. 여기서 가능한 유형 세트는 파서 자체에 의해 정의됩니다. 파서는 텍스트를 전혀 수정하지 않는다는 점에 유의하세요. 단지 그럴듯한 단어 경계를 식별할 뿐입니다. 이러한 제한된 범위로 인해 사용자 정의 사전보다 애플리케이션별 사용자 정의 파서가 덜 필요합니다. 현재포스트그레SQL다양한 애플리케이션에 유용한 것으로 확인된 하나의 내장 토토 사이트만 제공합니다.

내장 파서의 이름은 다음과 같습니다.pg_catalog.default. 23개의 토큰 유형을 인식합니다.표 12-1.

파서가 동일한 텍스트 조각에서 중복되는 토큰을 생성하는 것이 가능합니다. 예를 들어, 하이픈으로 연결된 단어는 전체 단어와 각 구성 요소로 보고됩니다.

ts_debug('foo-bar-beta1')에서 별칭, 설명, 토큰 선택;
      별칭 |               설명 |     토큰     
---+------------------+---------------
 숫자 | 하이픈으로 연결된 단어, 문자 및 숫자 | foo-bar-beta1
 hword_asciipart | 하이픈으로 연결된 단어 부분, 모두 ASCII | 푸
 공백 | 공간 기호 | -
 hword_asciipart | 하이픈으로 연결된 단어 부분, 모두 ASCII | 바
 공백 | 공간 기호 | -
 hword_numpart | 하이픈으로 연결된 단어 부분, 문자 및 숫자 | 베타1

이 동작은 전체 복합어와 구성요소 모두에 대해 검색이 가능하므로 바람직합니다. 다음은 또 다른 유익한 예입니다.

ts_debug('http://example.com/stuff/index.html')에서 별칭, 설명, 토큰 선택;
  별칭 |  설명 |            토큰             
----------+---------------+------------------
 프로토콜 | 프로토콜 헤드 | http://
 URL | URL | example.com/stuff/index.html
 호스트 | 호스트 | example.com
 URL_경로 | URL 경로 | /stuff/index.html