このリポジトリは、idis-rustのサブモジュールです。

Rustで実装されたtf-idfベクトライザーです。 tf-idf（Term Frequency-Inverse Document Frequency）は、情報検索やテキストマイニングで使用される重要な技術で、文書内の単語の重要度を評価します。

その他SplitterやToken頻度解析、正規化、ソートなどを提供します。