Clinton Gormley dc21ab7576 Docs: Corrected behaviour of max_token_length in standard tokenizer

2016-03-18 10:58:16 +01:00

..

classic-tokenizer.asciidoc

…

edgengram-tokenizer.asciidoc

…

keyword-tokenizer.asciidoc

…

letter-tokenizer.asciidoc

…

lowercase-tokenizer.asciidoc

…

ngram-tokenizer.asciidoc

…

pathhierarchy-tokenizer.asciidoc

…

pattern-tokenizer.asciidoc

…

standard-tokenizer.asciidoc

…

thai-tokenizer.asciidoc

…

uaxurlemail-tokenizer.asciidoc

…

whitespace-tokenizer.asciidoc

…