Uses of Class
de.neosearch.verweiserkennung.tokenizer.Token

Packages that use Token

Package	Description
de.neosearch.verweiserkennung
de.neosearch.verweiserkennung.tokenfilter
de.neosearch.verweiserkennung.tokenizer

Uses of Token in de.neosearch.verweiserkennung

Methods in de.neosearch.verweiserkennung that return types with arguments of type Token

Modifier and Type	Method	Description
Optional<Token>	AnalyzedText.getFirstToken(String tokenType)
List<Token>	AnalyzedText.getTokens()
List<Token>	AnalyzedText.getTokens(String tokenType)

Constructor parameters in de.neosearch.verweiserkennung with type arguments of type Token

Constructor	Description
AnalyzedText(List<Token> tokenList)

Uses of Token in de.neosearch.verweiserkennung.tokenfilter

Methods in de.neosearch.verweiserkennung.tokenfilter that return Token

Modifier and Type	Method	Description
Token	WhitelistFilter.accept(Token token)
Token	LowercaseWhitelistFilter.acceptImpl(Token token)
Token	SectionFilter.acceptImpl(Token token)
abstract Token	WhitelistFilter.acceptImpl(Token token)

Methods in de.neosearch.verweiserkennung.tokenfilter with parameters of type Token

Modifier and Type	Method	Description
Token	WhitelistFilter.accept(Token token)
Token	LowercaseWhitelistFilter.acceptImpl(Token token)
Token	SectionFilter.acceptImpl(Token token)
abstract Token	WhitelistFilter.acceptImpl(Token token)

Uses of Token in de.neosearch.verweiserkennung.tokenizer

Methods in de.neosearch.verweiserkennung.tokenizer that return Token

Modifier and Type	Method	Description
Token	Shingle.getUniGram()
Token	Shingle.moreToken()
Token	Token.withTokenType(String tokenType)

Methods in de.neosearch.verweiserkennung.tokenizer that return types with arguments of type Token

Modifier and Type	Method	Description
List<Token>	SimpleTokenizer.tokenize(String text)

Methods in de.neosearch.verweiserkennung.tokenizer with parameters of type Token

Modifier and Type	Method	Description
int	Token.compareTo(Token o)

Constructor parameters in de.neosearch.verweiserkennung.tokenizer with type arguments of type Token

Constructor	Description
Shingle(List<Token> tokens)
Shingle(List<Token> tokens, String tokenType)
ShingleTokenizer(List<Token> tokens, int maxShingleSize)