测试elasticsearch自定义分析器-竖线分隔关键字
Elasticsearch是一个开源的分布式搜索和分析引擎，它基于Lucene库构建而成，提供了一个快速、可扩展和高度可靠的搜索解决方案。在Elasticsearch中，自定义分析器是一种用于对文本进行预处理和分词的工具。竖线分隔关键字是一种自定义分析器的配置方式，它将文本按照竖线字符（|）进行分隔，将分隔后的关键字作为索引的一部分。
自定义分析器的概念：自定义分析器是Elasticsearch中的一种配置，用于定义文本预处理和分词的规则。通过自定义分析器，可以根据具体需求对文本进行灵活的处理，以提高搜索的准确性和效率。
自定义分析器的分类：自定义分析器可以分为字符过滤器、分词器和Token过滤器三个部分。字符过滤器用于对原始文本进行字符级别的处理，如去除HTML标签、转换大小写等；分词器用于将文本切分成单个的词条；Token过滤器用于对分词结果进行进一步的处理，如去除停用词、词干提取等。
自定义分析器的优势：自定义分析器可以根据具体需求进行定制，可以灵活地处理各种文本情况，提高搜索的准确性和效率。通过合理配置自定义分析器，可以使得搜索结果更加符合用户的期望。
自定义分析器的应用场景：自定义分析器广泛应用于各种文本搜索场景，如电商网站的商品搜索、新闻网站的文章搜索等。通过合理配置自定义分析器，可以提高搜索的准确性和效率，提升用户体验。
腾讯云相关产品和产品介绍链接地址：腾讯云提供了Elasticsearch的托管服务，即腾讯云ES。腾讯云ES是基于开源Elasticsearch的托管服务，提供了稳定可靠的Elasticsearch集群，支持自动伸缩、高可用、安全可靠等特性。您可以通过腾讯云ES来快速搭建和管理自己的搜索引擎。
腾讯云ES产品介绍链接地址：https://cloud.tencent.com/product/es
请注意，以上答案仅供参考，具体的配置和使用方法还需根据实际情况进行调整。
相关·内容
1回答
Elasticsearch本身似乎支持索引分析器和查询分析器，
但干草堆的elasticsearch似乎并没有区分它们。
我说得对吗？
相关的问题是，
Elasticsearch的DEFAULT_SETTING似乎有“settings.analysis.anaylyzer”和“index.Analysys.anaylyzer”。(例如，有“索引”)它们之间有什么区别？
浏览 0提问于2013-11-26得票数 1
1回答
我有一组以下短语: remix，18+等。我如何通过一个字符进行搜索，例如"["，以找到所有这些变体？现在我有以下分析器配置： {
"analysis": {
"analyzer": {
{ "bigram_analyzer": {
{ "type": "custom",
{ "tokenizer": { "keyword",
{ "filter": [
{
浏览 30提问于2021-08-06得票数 1
我使用elasticsearch客户端连接到elasticsearch。
在试图将映射添加到索引时，我收到以下警告：
es.indices.put_mapping(index=index, body=mappings)
/usr/local/lib/python2.7/dist-packages/elasticsearch/connection/base.py:209: ElasticsearchWarning: }}], attempted to validate it with the following match_mapping_type: [string], caused by [
浏览 1提问于2021-10-29得票数 0
回答已采纳
Elasticsearch 5.6
我将字段定义为文本字段，并使用空格分析器来避免连字符拆分。
我想使用查询字符串查询来查询它，如下所示：
{
"query": {
"query_string": {
"query": "CODE-13-006",
"default_operator": "AND",
"analyzer": "whitespace"
}
}
}
因此，如果
浏览 39提问于2020-02-03得票数 0
回答已采纳
我们尝试向Elasticsearch中的所有新索引添加客户分析器/小写筛选器。它看起来像这样：
"analysis": {
"normalizer": {
"lowercase_normalizer": {
"filter": [
"lowercase"
],
"type": "custom",
"char_filter":
浏览 1提问于2018-05-13得票数 0
1回答
我正在重新索引Firebase数据到ElasticSearch进行多位置查询。
但是，当我保存由id生成的ref.child('Users').push()自动时，例如：-KrjGdtUqG8LkTvTZKXO被索引为小写字符串(krjgdtuqg8lktvtzkxo)。
因此，当我在ElassticSearch中按其id对用户进行排序时，订单与Firebase不同。
如何对id进行适当的索引以使用Firebase保存订单？
浏览 8提问于2017-08-17得票数 2
回答已采纳
1回答
我正在使用elasticsearch。例如，我正在进行字符搜索。把它想象成一个医学名称。我们可以很容易地找到一种叫A-ferin的药物。然而，我们称之为aferin，我们需要能够在没有任何特殊字符的情况下直接找到它。
我应该做什么样的研究才能用.NET核心实现这一点？
浏览 0提问于2021-06-14得票数 0
使用Elasticsearch，我使用自定义映射和自定义分析集创建了一个索引，但是我无法对_all字段进行查询搜索。
我正在使用这些分析器：
{
"analysis": {
"analyzer": {
"case_insensitive": {
"type": "custom",
"tokenizer": "keyword",
"fi
浏览 1提问于2015-05-11得票数 1
回答已采纳
我使用Elasticsearch和Laravel，我实现了所有的东西，它可以像上面的代码一样处理简单的匹配查询。
'body' => [
"query" => [
"bool" => [
"should" => [
["regexp" => [
浏览 3提问于2019-06-04得票数 0
我正在尝试做一个自定义分析器来查询我的elasticsearch索引。我正在使用PHP的网页界面。下面是我在fetch_nptel.php文件中的代码，它从索引中获取数据：
<?php
//fetch_nptel.php
session_start();
require_once '../vendor/autoload.php';
use Elasticsearch\ClientBuilder;
$client = ClientBuilder::create()->setHosts(['127.0.0.1:9200'])->build();
浏览 3提问于2020-03-31得票数 1
回答已采纳
我在一个项目上使用弹性搜索来完成一个自动完成的功能。
交易是这样的。
如果我搜索关键字= "bird nest"，我会得到一些我不想得到的结果：
X在加利福尼亚的鸟巢
Y燕窝在亚特兰大
z鸟，nest是不可用的(这是我不想要的)
有没有办法让elasticsearch与单词之间有逗号的搜索不匹配？
下面是我的查询内容。
{
"from": 0,
"size": 20,
"sort": [
{
"rate": {
浏览 3提问于2013-12-19得票数 2
我有一个在elasticsearch中搜索的特例。我还深入研究了文档、标记器(n克、边缘ngram)、查询等以及堆栈溢出搜索，但没有结果。
背景I有一个包含一些字符串字段的小索引(eq )。姓名、街道、城市、电子邮件)。
以及类似这样的查询
Lorem ipsum dolor坐好了，敬请光临。[医]埃尼昂·科莫多·伊古拉·多洛。埃尼安·马萨。同时社会是自然的，不是分娩的，而是母体。猫科动物，三叶草，欧洲植物，牛肝菌，sem。在，我的名字叫 quis，My-Street。长笛，圆圈，飞碟，低俗的eget，弧。在欧洲法院，罗布麻，不允许饮食a，文冠花，法官。虎耳草。整数修补。大比目鱼。[医]野黄
浏览 2提问于2017-01-10得票数 0
回答已采纳
我有一个很大的spaCy文档列表和一个要在文档中查找的单词列表。举个例子:我想在用spaCy解析的网站文本中查找单词“阿司匹林”。我要查找的关键字列表相当长。 天真的方法 不要使用spacy，只使用if keyword in website_text:作为简单的匹配器。当然，这也有缺点，即令牌被忽略，搜索test将在tested、attested等词上产生误报。 使用spaCy的匹配器 Matcher是一个选项，但我需要根据我的关键字列表自动构建许多匹配器。 有没有推荐的方法来完成这项任务？
浏览 18提问于2020-03-24得票数 1
如何使用elasticsearch搜索多个字段？我尝试过许多疑问，但都没有结果。我希望搜索是不区分大小写的，一个字段比另一个字段更重要。我的查询如下：
const eQuery = {
query: {
query_string: {
query: `*SOME_CONTENT_HERE*`,
fields: ['title^3', 'description'],
default_operator: 'OR',
},
},
}
浏览 0提问于2018-03-14得票数 2
回答已采纳
我正在尝试使用elasticsearch中的渗透函数。它工作得很好，但开箱即用，没有词干来处理单数/复数等。关于这个主题的文档很少，所以我想知道是否有人已经使用了它，需要什么设置。目前我没有索引我的文档，因为我没有搜索它们，只是通过过滤器传递它们来触发通知。
浏览 1提问于2013-02-13得票数 1
回答已采纳
1回答
我在MySQL中有下一个结构：
表组- id、title、user_id
表关键字- id，title
表group_keyword - group_id，keyword_id
我查了5个案件：
按组标题的完全匹配title = "keyword"
按关键字标题title = "keyword"完全匹配
按组标题title like "keyword%"部分匹配
按组标题title like "%keyword%"部分匹配
按关键字标题title like "%keyword%
浏览 1提问于2017-07-27得票数 1
1回答
禁用弹性搜索搜索分析器
、、、、
我正在开发elasticsearch版本7.2，我在
提高ES调用性能的过程。
应用程序。
据我所读，如果我们没有设置“搜索分析器”，在默认情况下，标准分析器将被设置。
但在不需要分析器的情况下，拥有分析器可能会影响性能。是否将所有字段作为“关键字”来防止这种情况？
或者有其他方法禁用这个“搜索分析器”吗？
如果你能告诉我答案所依据的官方文件，我会非常感激的。
浏览 1提问于2019-06-28得票数 2
回答已采纳
我有一个从Asciidoc源代码生成reveal.js演示文稿的工作设置，并突出显示源代码。
例如，这是一张包含Java代码的幻灯片：
== Slide Two
Some sample text
[source,java]
----
public class TestClass {
public TestClass() {
}
}
----
如何从Asciidoc源码块使用来自reveal.js的？
浏览 17提问于2021-03-03得票数 0
回答已采纳
我在使用Elasticsearch技术时遇到了麻烦。我希望使用查询字符串在长文本中找到确切的值。
如果我在寻找“喜欢我的狗”这个词，我想检索包含“我喜欢我的狗和猫”的文档。
为此，我希望使用带有引号的查询字符串(因为我必须实现逻辑运算符和或不实现逻辑运算符)：
{
"query_string" : {
"query" : "like my dogs"
}
}
我的地图可能很差。下面是要查询的字段的映射：
"settings":{
"analyzer": {
浏览 2提问于2016-06-16得票数 0
回答已采纳
我正在使用Nest，它是elasticsearch的.Net客户端。我在寻找GUID时遇到了问题。正如GUID有"-“一样，elasticsearch正在考虑作为令牌。
下面是我面临的问题。
我有一个具有以下属性的实体"Employee“。
Id : Guid
Name : varchar
DepartmentId : Guid (E.g cb5d39ee-05f0-4351-baba-8eed6c9111ad)
现在我需要得到属于特定部门的员工名单。所以我会把部门的身份证给我。
由于DepartmentId中有一个"-“，elasticsearc
浏览 0提问于2014-06-12得票数 4
我是Elasticsearch的新手，并且愿意使用全文搜索引擎。对于文本分析，我需要使用(多语言)语言分析器。Elasticsearch提供了内置的语言分析器，但我不确定它们是否包括预处理步骤，如:删除停用词，词干，删除不需要的字符等。我将使用多个字段，因为所有(描述)语言都在文档中的同一个字段中进行索引。在这种情况下，这样的映射是否正确？
{
"mappings": {
"properties": {
"description": {
"type": "text",
浏览 4提问于2020-06-22得票数 1
我有以下elasticsearch设置：
"settings": {
"index":{
"analysis":{
"analyzer":{
"analyzer_keyword":{
"tokenizer":"keyword",
"filter":["lowercase", "asciifolding&
浏览 2提问于2016-09-09得票数 1
回答已采纳
我对Elasticsearch还不熟悉，而且还在学习。我有一个名为article的索引。索引中的文档有一个名为body的字段，其中包含文章的文本。文本的语言是Hindi。
我希望找到一个特殊的符号hyphen(-)连接的单词。
如果我通过id搜索一篇文章，结果如下所示：
GET /article/_doc/<some id>
{
"_index" : "article",
"_type" : "_doc",
"_id" : "<some id>",
"
浏览 4提问于2020-04-10得票数 1
回答已采纳
1回答
在Elasticsearch中，我想用我的自定义分析器索引一些字段。因此，首先，我在附加配置中添加了我的分析器。
Liferay ->控制面板->系统设置->“Serach弹力搜索并选择‘-弹力搜索7-’->”
附加索引配置
{
"analysis": {
"analyzer": {
"mmc_custom": {
"tokenizer": "standard",
"filte
浏览 5提问于2021-07-22得票数 1
回答已采纳
1回答
使用NEST+ElasticSearch时，我怀疑需要特殊编码的字符没有得到正确处理。示例:这不会返回任何结果
var results =
client.Search<MyClass>(s => s.Query(q => q.Term(t => t.ProgrammingLanguage, "C#")));
但是在将"C#“替换为"Ruby”之后，运行得很好。查看索引，应该会有两个搜索的结果。
是否存在已知问题？有解决办法吗？
浏览 0提问于2013-04-16得票数 1
回答已采纳
我是Protobuf的新手，我已经能够为我的消息创建.proto文件。但我想知道在protobuf中是否有对解析管道分隔消息的开箱即用支持。
谢谢!
浏览 0提问于2015-08-11得票数 1
2回答
我知道我们在couchdb上创建视图，然后我们可以搜索。另一种有趣的方法是通过河流将couchdb与elasticsearch连接起来，并在elasticsearch中进行搜索。我有两个问题：
就磁盘空间的使用而言，elasticsearch会更有效吗？
使用couchdb搜索和在couchdb之上使用elasticsearch的利弊是什么？
谢谢!
浏览 5提问于2012-10-23得票数 3
回答已采纳
标准分析器无法正常工作。据我所知，它将其更改为搜索c和net
WhitespaceAnalyzer可以工作，但它区分大小写。
一般的规则是搜索应该像谷歌一样工作，所以希望这是一个配置问题，考虑到.net，c#已经存在一段时间了，或者有一个解决方案。
根据下面的建议，我尝试了自定义WhitespaceAnalyzer，但如果关键字由逗号分隔，并且没有空格，则不能正确处理。
java,.net,c#,oracle
将不会在搜索时返回，这是不正确的。
我遇到了PatternAnalyzer，它用于拆分令牌，但不知道如何在此场景中使用它。
我使用的是Lucene.Net 3.0.3和.NET 4.0
浏览 1提问于2013-02-22得票数 6
回答已采纳
我正在用Elasticsearch索引一个网站，它有很多有斯堪的纳维亚字符的名字。问题是，我们的用户通常使用美式英语键盘，用最接近的英文字母替换这些字符。例如，索引的内容是Tromsø，但搜索的是Tromso。
如何在Elasticsearch中添加字符同义词，使原始字符和英文字符相等
浏览 3提问于2017-04-08得票数 1
回答已采纳
我使用Elasticsearch 11作为查询文本。 我有下面的查询，但它没有返回任何文档。 POST/_search
{
"query": {
"term":{
"metric_name" : {"value": "ConsumedReadCapacityUnits","boost": 1.0}
}
}
} 然后我将其更改为text查询，如下所示，它可以查找匹配的文档： POST/_search
{
"query": {
"
浏览 27提问于2021-08-18得票数 0
回答已采纳
我正在将一些数据索引到elasticsearch中，其中一部分是IP地址(存储为字符串类型，而不是ip类型)。我正在为IP地址字段使用自定义分析器，定义如下：
'ipv4_address_analyzer' => [
'type' => 'custom',
'tokenizer' => 'ipv4_path_tokenizer',
'filter' => [],
],
ipv4_path_tokenizer的定义如下：
'ipv4_path_t
浏览 5提问于2013-12-18得票数 1
回答已采纳
如何在正则表达式中添加两个以上的条件？
我应该为我的正则表达式输入什么才能接受其他单词？我需要将其作为一个整体接受，这样我就可以将值传递给另一个页面
例如:也接受
contact2012,service2012,docs2014
正则表达式
"pas":{
"regex":"/service2012/",
"alertText":"* Invalid Password"},
浏览 3提问于2012-09-24得票数 0
回答已采纳
我意识到查询Elasticsearch时
GET animals/_search
{
"query": {
"match_phrase_prefix": {
"Title": "ti"
}
}
}
返回
Tiger
实木狼
虎蛇
虎的眼睛(这是不需要的)
在不维护不同的match_phrase_prefix字段的情况下，如何才能实现真正的Title而不是match_token_prefix，只为了应用如下所述的不同的分析器：
--更新2
浏览 1提问于2017-03-20得票数 0
请有人指出如何定义自定义分析器，然后使用Java在ElasticSearch查询中使用？
我知道如何编写用于索引()的自定义分析器。
但是，我想将它应用于查询，例如替换
QueryBuilder matchQuery = matchQuery("content", stringQuery).analyzer("english");
浏览 1提问于2016-03-25得票数 0
回答已采纳
我有一个Java，它允许在本地ElasticSearch服务器上索引文档。我现在想要构建一个简单的Web，它允许用户通过在表单中键入一些文本来查询ES索引。
我的问题是，在调用ES API来发出查询之前，我希望通过调用一些Java代码对用户输入进行预处理。
实现这一目标的最简单、最“清洁”的方法是什么？
我是否应该创建自己的API，以便UI能够访问我的Java代码？
应该使用JSP构建UI以便直接调用Java代码吗？
在执行查询之前，我是否可以让ElasticSearch执行我的Java代码？(也许是通过创建我自己的ElasticSearch插件？)
浏览 2提问于2015-07-28得票数 0
回答已采纳
我是ASP.NET中的弹性搜索的新手，我有一个问题，到目前为止，我还无法解决。 从文档中，我已经看到&符号并没有被列为特殊字符。然而，当我提交我的搜索时，我的&符号被完全忽略了。例如，如果我搜索procter & gamble，& sign将被完全忽略。这给我带来了很多问题，因为我的公司都有像M&S这样的名字。当&符号被忽略时，我基本上得到了其中包含M或S的所有内容。如果我尝试使用精确搜索(M&S)，我也会遇到同样的问题。 我的代码是： void Connect()
{
node = new Uri(Co
浏览 12提问于2019-03-15得票数 0
当我查询_all字段的数据时，Elasticsearch返回两个文档(文档中都只有一个字段)。但是，当我执行相同的查询时，除了将被查询的字段从_all更改为返回文档中的一个字段的名称外，Elasticsearch什么也不返回。这似乎发生在query_string查询和这里显示的match查询中。有什么想法吗?这是怎么回事，以及如何解决？
这是映射
analyzertestpatternsemi: {
mappings: {
content: {
properties: {
field: {
type: string
浏览 7提问于2014-11-04得票数 1
我在Elasticsearch集群上有一个索引，我想支持语音匹配。
这是我的要求：
curl -XPUT "http://localhost:9200/propertywebsites/_mapping/doc?pretty" -i -d '
{
"properties" : {
"phoneticbuilding" : {
"type" : "string",
"fields" : {
"phonetic" : {
"type" : "string&
浏览 4提问于2016-01-03得票数 1
回答已采纳
在Elasticsearch中，如何使用符号搜索值？试过：
http://localhost:9200/my_index/_search?q=name:"procter \u0026 gamble"
浏览 0提问于2015-08-12得票数 1
回答已采纳
我不知道如何测试我的自定义分析器/查看分析过的数据。
通常，在创建索引时，我会将自定义分析器添加到“索引设置”中。在这种情况下，我遇到的问题是我没有使用索引，或者至少我认为我没有使用，我不知道如何将我的自定义分析器添加到Elasticsearch客户机中？
这是我目前用于测试“分析”部分的方法：
public async Task AnalizeField(string analyzer, string textToAnalyze)
{
var elasticClient = ElasticsearchHelper.DatabaseConnection();
var anal
浏览 0提问于2018-05-11得票数 1
回答已采纳
1回答
我需要在弹性中实现整个单词搜索，它应该像下面的例子那样工作：
查询：“测试”
必须匹配以下字符串：
this is the test
the test is necessary
I didn't write the test because I was sick.
the test\non the newline
the test
，但不是：
this is the testing server
this test is very good
I wrote my test with the cheatsheet
我尝试过使用，但是有几个问题，因为Elasticsearch语法与Per
浏览 3提问于2015-12-14得票数 1
1回答
我是ELK的新手，似乎从复杂的问题开始;-)我有如下元素：
{
"_index": "asd01",
"_type": "doc",
"_id": "...",
"_score": 0,
"_source": {
"@version": "1",
"my-key": "hello.world.to.everyone",
"
浏览 4提问于2018-02-12得票数 0
回答已采纳
例如，我在name字段中有一个带有短语“星球大战”的文档。我想用DSL进行搜索，查询“星战”并得到这个文档。我想得到这样的东西
GET _search
{
"query" : {
"match_phrase" : {
"name": {
"query" : "starwars"
}
}
}
}
我怎么才能用elasticsearch做这件事呢？
浏览 3提问于2016-02-15得票数 1
回答已采纳
我有Elasticsearch 2.4和我的许多索引，其中使用“雪球”分析器，但是今天我更新到5.1，这个分析器停止工作，为什么它们在哪里被删除，以及如何将我的“雪球”分析器转换为5.1中的等效分析器？
浏览 10提问于2017-01-26得票数 1
回答已采纳
我想知道为什么搜索特定的术语返回索引的所有文档，而不是包含所请求的术语的文档。
这是索引和我如何设置它：(使用elasticsearch头插件浏览器-接口)
{
"settings": {
"number_of_replicas": 1,
"number_of_shards": 1,
"analysis": {
"filter": {
"dutch_stemmer": {
"type": "dicti
浏览 3提问于2014-10-22得票数 1
回答已采纳
我想索引和搜索101,101,101nd等，如101,102等。ElasticSearch有没有过滤器可以做到这一点？
浏览 14提问于2020-04-09得票数 2
回答已采纳
我有一个包含单词的标记数组。
tags: ['australianbrownsnake', 'venomoussnake', ...]
如何将其与以下搜索词进行匹配：“棕色蛇”、“澳大利亚蛇”、“有毒的”、“有毒的棕色蛇”。
我甚至不确定这是否可能，因为我是Elasticsearch的新手。如果能帮上忙，我们将不胜感激。谢谢。
编辑:我创建了一个ngram分析器，并添加了一个名为ngram的字段，如下所示。
properties": {
"tags": {
"type": "text",
浏览 28提问于2019-11-01得票数 1
回答已采纳
我对Elasticsearch并不熟悉，我不知道如何在我的情况下继续下去。
我有以下映射：
{
"mappings": {
"book": {
"properties": {
"title": {
"properties": {
"en": {
"t
浏览 5提问于2014-07-22得票数 0
回答已采纳
我正在尝试添加一个默认的mapping.json文件，但我不确定它是否已读取。我怎样才能正确地测试它？如果它没有被读取，我如何指定Elasticsearch来读取该文件？这是/etc/默认值中的文件：
# Run Elasticsearch as this user ID and group ID
#ES_USER=elasticsearch
#ES_GROUP=elasticsearch
# Heap Size (defaults to 256m min, 1g max)
#ES_HEAP_SIZE=2g
# Heap new generation
#ES_HEAP_NEWSIZE=
浏览 1提问于2014-08-04得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
