小写
lowercase
过滤器将标记符号生成器生成的术语转换为小写,使搜索不区分大小写。例如,它可以将["High", "Performance", "Vector", "Database"]
转换为["high", "performance", "vector", "database"]
。
配置
lowercase
过滤器内置于 Milvus。要使用它,只需在analyzer_params
中的filter
部分指定其名称即可。
analyzer_params = {
"tokenizer": "standard",
"filter": ["lowercase"],
}
lowercase
过滤器对标记符生成的术语进行操作,因此必须与标记符结合使用。
定义analyzer_params
后,可以在定义 Collections Schema 时将它们应用到VARCHAR
字段。这样,Milvus 就可以使用指定的分析器对该字段中的文本进行处理,从而实现高效的标记化和过滤。有关详情,请参阅示例使用。
输出示例
下面是lowercase
过滤器处理文本的示例。
原始文本。
"The Lowercase Filter Ensures Uniformity In Text Processing."
预期输出。
["the", "lowercase", "filter", "ensures", "uniformity", "in", "text", "processing"]