我正在尝试使用Apache Lucene进行标记,我对从一个获取令牌的过程感到困惑TokenStream.
TokenStream
最糟糕的是,我正在查看解决我的问题的JavaDocs中的注释.
http://lucene.apache.org/java/3_0_1/api/core/org/apache/lucene/analysis/TokenStream.html#incrementToken%28%29
不知何故,AttributeSource应该使用an 而不是Tokens.我完全不知所措.
AttributeSource
Token
任何人都可以解释如何从TokenStream获取类似令牌的信息吗?
java lucene attributes token tokenize
attributes ×1
java ×1
lucene ×1
token ×1
tokenize ×1