LuceneではTokenFilterはどのように複数の用語を出力できますか？

Question

私はLucene 3.2と協力しています。用語をフィルタリング/変更するだけでなく、他の用語をストリームに挿入できるTokenFilterを使用するにはどうすればよいですか？

たとえば、入力として「tv42lcd」を取り、ストリームに「tv42lcd」、「tv」、「42」、「lcd」という単語を挿入するフィルタが必要です。

私は自分のTokenizerを実装することでこれを行うことができることを知っています。しかし、私はまだ提供されているStandardTokenizerを使用しています。

Answer 1

いつでもデフォルトとカスタムを混在させることができます。可能であればStandardTokenizerロジックを使用し、その出力をラップして上部にカスタムトークンを追加します。これを拡張することで実現できますが、それはalmost always better to use compositionです。