laravel中设置数据库读写分离后强制使用主库查询
背景在项目比较火爆，QPS比较高时，可以设置读写分离来扩容数据库，减少数据库的压力，但是有些业务可能对数据一致性要求比较高，比如支付。当支付成功时，再去查询订单状态时，如果查询走的从库，如果出现主从延...
记一次连接Redis偶现超时的问题
问题描述公司老的项目没有任何监控，对于系统的运行健康情况完全不知，于是搭建了2套监控系统，一套sentry监控代码层面的exception，一套cls告警，监控所有系统的状态码，应用日志等。监控系统上...
记一次laravel项目因opcache导致的include过慢问题
问题表现 php-fpm-slow.log 大量如下日志：script_filename = /data/nginx/webroot/app-20200611-160330-feb...
记一次tp3.2.3因fetch导致的漏洞处理过程
问题描述：最近发现百度收录大幅度下降，并出现大量5xx错误，有些收录页面直接跳转到其他网站，如下图：问题追查1.根据以往经验首先怀疑网站被植入或者挂马 &nbs...
记一次laravel项目因session导致cpu过高的问题
问题起因：腾讯云监控CPU过高报警 10:20-10:28左右持续 百分之80以上。问题排查：1. 查看php-fpm慢日志发现有大量如下日志：[26-May-2020 ...
elasticsearch中重新索引数据
概念虽然你可以给索引添加新的类型，或给类型添加新的字段，但是你不能添加新的分析器或修改已有字段。假如你这样做，已被索引的数据会变得不正确而你的搜索也不会正常工作。 修改在已存在的数据最简单的...
elasticsearch中动态模板全解实战
动态模板在我们最开始使用ES的时候，可能还不太了解mapping，也没有添加过mapping为什么我们还是能够正常的添加文档。那是因为ES可以动态映射，添加文档的时候遇到没有的字段，可以动态的添加到m...
elasticsearch中mapping全解实战
Mapping简介#mapping 是用来定义文档及其字段的存储方式、索引方式的手段，例如利用mapping 来定义以下内容：哪些字段需要被定义为全文检索类型哪些字段包含number、dat...
elasticsearch中最重要的查询过滤语句
term 过滤term 主要用于精确匹配哪些值，比如数字，日期，布尔值或 not_analyzed 的字符串(未经分析的文本数据类型){ "term": { "age&q...
logstash中同步mysql到elastic常见问题总结
1. mysql查询字段中有 type字段问题原因select语句中查到了type, 但es中会默认有一个type, 这使得两个type冲突.会导致同步失败，且没有报错GET my_inde...
elasticsearch中倒排索引详解
概念Elasticsearch使用一种叫做倒排索引(inverted index)的结构来做快速的全文搜索。倒排索引由在文档中出现的唯一的单词列 表，以及对于每个单词在文档中的位置组成。示例我们有两个...
elasticsearch中分析器的原理和使用
概念分析(analysis)机制用于进行全文文本(Full Text)的分词，以建立供搜索用的反向索引。原理分析器的工作过程大概分成两步：分词（Tokenization）：根据停止词把文本分割成很多的...
elasticsearch中query和filter区别
区别在进行query的时候，除了完成匹配的过程，我们实际上在问“这个结果到底有多匹配我们的搜索关键词”。在所有的返回结果的后面都会有一个_score字段表示这个结果的匹配程度，也就是相关性。相关性越高...
elasticsearch中SearchApi的详解
搜索流程当一个搜索请求被发送到某个节点时，这个节点就变成了协调节点。 这个节点的任务是广播查询请求到所有相关分片并将它们的响应整合成全局排序后的结果集合，这个结果集合会返回给客户端。多索引搜...
elasticsearch模糊查询match match_phrase wildcard regexp prefix的区别
1.match查询会先对搜索词进行分词，比如“白雪公主和苹果”，会分成“白雪”“公主”“苹果”。含有相关内容的字段，都会被检索出来。2.match_phrase查询match_phrase与slop一...
elasticsearch基于地理位置的搜索
场景现在基于地理位置的app层出不穷，支持地理位置的组件也有不少，Elasticsearch也不例外，并且ES可以把地理位置、全文搜索、结构化搜索和分析结合到一起，我们来看一下。注意本文章基于es7，...
elasticsearch高亮搜索highlight
概念我们在浏览器上搜索文本时，发现我们输入的关键字有高亮显示，查看html源码就知道，高亮的部分是加了<em>标签的，ES也支持高亮搜索这种操作的，并且在返回的文档中自动加了<em&...
elasticsearch用于html去标签化搜索
场景elasticsearch用于html去标签化搜索：即在Index的时候忽略html tag，同时又存储了完整的html，在使用的时候可以正常读出来。示例假设我们给content字段自定义anal...
logstash过滤器--mutate
概念filters/mutate 插件是 Logstash 另一个重要插件。它提供了丰富的基础类型数据处理能力。包括类型转换，字符串处理和字段处理等。Plugin version: v3.5.0执行顺...
es中单机部署状态为Yellow解决办法
背景单机版的 ES 状态为 Yellow，在 Kibana 的管理界面看到的 index 的状态也是 Yellow这个问题在于单机版的 ES，是没有备份的，没有副本，设置 index 副本的数量为 0...