分类目录归档：ELK

2019
08-19

elasticsearch中store设置true和false的区别 NEW

概念设置索引的时候，我们给某些字段的store属性设置为true，在查询时，请求中可以携带stored_fields参数，指定某些字段，最后，这些字段会被包含在返回的结果中。如果请求中携带的字段没有被储存，将会被忽略。示例默认的场景我们先观察没有设置store属性的字段情况。我们新增一个document，并利用自动生成索引功能创建索引：PUT my_index/_doc/1{  "content":"这是一个内容&q... Read More >
2019
08-03

elasticsearch中分词器edge_ngram和ngram的区别

简介edge_ngram和ngram是ElasticSearch自带的两个分词器，一般设置索引映射的时候都会用到，设置完步长之后，就可以直接给解析器analyzer的tokenizer赋值使用。场景用 Elasticsearch 处理通配符查询不太适合，推荐用分词器 NGram，这个分词器可以让通配符查询和普通的查询一样迅速，因为该分词器在数据索引阶段就把所有工作做完了示例若要使用 NGram 分词器作为某个字段的分词器，可在索引创建时指定，也可以更新映射关系，以下展示如何在... Read More >
2019
08-02

elasticsearch中的常见问题和优化策略

常见优化策略：filter过滤器查询优化结果分数是Elasticsearch的关键。 通常，当您使用搜索引擎时，您需要最准确的结果。 例如，如果您正在搜索“苹果”，您不希望结果包括“苹果手机”。Elasticsearch根据您提供的参数对查询结果进行评分。虽然查询相关性不是本篇文章的重点，但重要的是在此提及，因为如果您有快速搜索需求但结果不是您要查找的结果，则整个搜索都是浪费时间。 那么，你如何加快搜索速度？1 查询时，使用query-bool-filter组合取代普通qu... Read More >
2019
08-01

elasticsearch中如何分析慢查询

elasticsearch中如何分析慢查询背景首先，Elasticsearch中有两个版本的慢速日志：索引慢速日志（index slow logs ）和搜索慢速日志（ search slow logs）。 由于我们试图解决的问题涉及慢查询，我们将专注于搜索慢速日志。 但是，如果在索引文档/添加文档时问题，那么我们将查看索引慢速日志。默认情况，慢日志是不开启的。要开启它，需要定义具体动作（query，fetch 还是 index），你期望的事件记录等级（ WARN、INFO、DEBUG、TRACE&nbs... Read More >
2019
07-27

elasticsearch中重新索引数据

概念虽然你可以给索引添加新的类型，或给类型添加新的字段，但是你不能添加新的分析器或修改已有字段。假如你这样做，已被索引的数据会变得不正确而你的搜索也不会正常工作。 修改在已存在的数据最简单的方法是重新索引：创建一个新配置好的索引，然后将所有的文档从旧的索引复制到新的上。_source 字段的一个最大的好处是你已经在 Elasticsearch 中有了完整的文档，你不再需要从数据库中重建你的索引，这样 通常会比较慢。 为了更高效的索引旧索引中的文档，使用【scan-s... Read More >
2019
07-26

elasticsearch中动态模板全解实战

动态模板在我们最开始使用ES的时候，可能还不太了解mapping，也没有添加过mapping为什么我们还是能够正常的添加文档。那是因为ES可以动态映射，添加文档的时候遇到没有的字段，可以动态的添加到mapping中动态模板，英文名为Dynamic Templates，是根据Elasticsearch可识别的数据类型，结合字段名称，来动态设定字段类型的一种机制。自动识别规则首先es可以自动识别文档字段的类型，这样可以降低用户的使用成本。es是依靠json文档的字段类型来实现自动... Read More >
2019
07-24

elasticsearch中mapping全解实战

Mapping简介#mapping 是用来定义文档及其字段的存储方式、索引方式的手段，例如利用mapping 来定义以下内容：哪些字段需要被定义为全文检索类型哪些字段包含number、date、布尔、浮点类型等格式化时间格式自定义规则，用于控制动态添加字段的映射自定义mappingmapping中的字段类型一旦设置，禁止直接修改，因为 lucene实现的倒排索引生成后不允许修改，应该重新建立新的索引，然后做reindex操作。但是可以新增字段，通过 dynamic... Read More >
2019
07-18

elasticsearch中分析器的原理和使用

概念分析(analysis)机制用于进行全文文本(Full Text)的分词，以建立供搜索用的反向索引。原理分析器的工作过程大概分成两步：分词（Tokenization）：根据停止词把文本分割成很多的小的token，比如the quick fox会被分成the、quick、fox，其中的停止词就是空格，还有很多其他的停止词比如&或者#，大多数的标点符号都是停止词归一化（Normalization）：把分隔的token变成统一的形式方便匹配，比如下面几种把单词变成小写，... Read More >
2019
07-17

elasticsearch中query和filter区别

区别在进行query的时候，除了完成匹配的过程，我们实际上在问“这个结果到底有多匹配我们的搜索关键词”。在所有的返回结果的后面都会有一个_score字段表示这个结果的匹配程度，也就是相关性。相关性越高的结果就越排在前面，相关性越低就越靠后。当两个文档的相关性相同的时候，会根据lucene内部的doc_id字段来排序，这个字段对于用户是不可见的也不能控制。而在进行filter的时候，仅仅是在问“这个文档符不符合要求”，这仅仅是一个过滤的操作判断文档是否满足我们的筛选要求，不会计... Read More >
2019
07-16

elasticsearch中SearchApi的详解

搜索流程当一个搜索请求被发送到某个节点时，这个节点就变成了协调节点。 这个节点的任务是广播查询请求到所有相关分片并将它们的响应整合成全局排序后的结果集合，这个结果集合会返回给客户端。多索引搜索恰好也是用相同的方式-只是会涉及到更多的分片。查询阶段客户端发送一个 search 请求到 Node 3 ， Node 3 会创建一个大小为 from + size 的空优先队列。Node 3 将查询请求转发到索引的每个主分片或副本分片中。每个分片在本地执行查询并添加结果到大小... Read More >
2019
07-15

elasticsearch模糊查询match match_phrase wildcard regexp prefix的区别

1.match查询会先对搜索词进行分词，比如“白雪公主和苹果”，会分成“白雪”“公主”“苹果”。含有相关内容的字段，都会被检索出来。2.match_phrase查询match_phrase与slop一起用，能保证分词间的邻近关系，slop参数告诉match_phrase查询词条能够相隔多远时仍然将文档视为匹配，默认是0。为0时 必须相邻才能被检索出来。例如下面的语句，会把“白雪公主吃苹果”也能检索出来GET my_index/_search {  &n... Read More >
2019
07-14

elasticsearch基于地理位置的搜索

场景现在基于地理位置的app层出不穷，支持地理位置的组件也有不少，Elasticsearch也不例外，并且ES可以把地理位置、全文搜索、结构化搜索和分析结合到一起，我们来看一下。注意本文章基于es7，用es6的话可能语法稍有不同，仅供参考geo point数据类型Elasticsearch基于地理位置的搜索，有一个专门的对象geo_point存储地理位置信息（经度，纬度），并且提供了一些基本的查询方法，如geo_bounding_box。建立geo_point类型的mappi... Read More >
首页 上一页 1 2 3 下一页 最后