Partager via

LexicalTokenizerName Énumération

  • Référence

Définit les noms de tous les générateurs de jetons pris en charge par le moteur de recherche.

Héritage
builtins.str
LexicalTokenizerName
Enum
LexicalTokenizerName

Constructeur

LexicalTokenizerName(value, names=None, *, module=None, qualname=None, type=None, start=1, boundary=None)

Champs

CLASSIC
EDGE_N_GRAM
KEYWORD
LETTER
LOWERCASE
MICROSOFT_LANGUAGE_STEMMING_TOKENIZER
MICROSOFT_LANGUAGE_TOKENIZER
N_GRAM
PATH_HIERARCHY
PATTERN
STANDARD
UAX_URL_EMAIL
WHITESPACE