标签：Tokenizer

herman 6年前 (2018-12-12) 2378浏览

在 Lucene 中，不仅 TokenFilter 我们可以自定义，Analyzer 我们也可以自定义。本文介绍两个扩展 Analyzer 的例子，分别实现扩展停用词，实现字长过滤的功能。 自定义 Analyzer 自定义 Analy...

herman 6年前 (2018-12-12) 2518浏览

这一章也不算是什么新的内容了，前面我已经写过两篇关于 Analyzer 的内容了。它们分别是《深入理解 Lucene 的 Analyzer》、《详解 org.apache.lucene.analysis.Analyzer 使用教程》。这篇文章，我...

herman 6年前 (2018-12-10) 5177浏览

Analyzer 单词的意思就是分析，它是一个抽象类，在 Lucene 的 org.apache.lucene.analysis 包中。lucene-analyzers-common 包中提供了非常多的分析器。比如：StandardAnalyze...

herman 7年前 (2017-08-22) 2273浏览 0评论

索引是现代搜索引擎的核心，建立索引的过程就是把源数据处理成非常方便查询的索引文件的过程。为什么索引这么重要呢，试想你现在要在大量的文档中搜索含有某个关键词的文档，那么如果不建立索引的话你就需要把这些文档顺序的读入内存，然后检查这个文章中是不是含有...