2021年11月

2021
11-23

supervisorctl 非root用户调用权限最终原因 NEW

背景用supervisor来守护服务器程序, 但使用非root用户云调用supervisorctl来操作程序时， 总是提示权限问题[www@super-test ~]$ supervisorctl status error: <class 'PermissionError'>, [Errno 13] Permission denied: file:... Read More >

2021
11-22

oom-killer详解和实战 NEW

作为Linux下的程序员，有时不得不面对一个问题，那就是系统内存被用光了，这时当进程再向内核申请内存时，内核会怎么办呢？程序里面调用的malloc函数会返回null吗？为了处理内存不足时的问题，Linux内核发明了一种机制，叫OOM(Out Of Memory) killer，通过配置它可以控制内存不足时内核的行为。OOM killer当物理内存和交换空间都被用完时，如果还有进程来申请内存，内核将触发OOM killer，其行为如下：1.检查文件/proc/sys/vm/pa... Read More >

2021
11-21

线上服务器oom killer实战详解 NEW

背景最近一台线上定时任务服务器，经常不定期报错，经常是请求外部接口的时候报错了。分析单独测试没有问题，外部接口也正常响应，百思不得其解，于是根据发生报错的时间点查看系统日志，发现触发了系统的oom-killervi /var/log/messages Jun 28 17:30:06 super-task-cron kernel: php invoked oom-killer: gf... Read More >

2021
11-20

shell脚本实现秒级定时任务的方法

编写Shell脚本crontab.sh#!/bin/bash step=1 #间隔的秒数，不能大于60 for (( i = 0; i < 60; i=(i+step) )); do   $(php '/home/www/php/crontab/crontab.php')  &nbs... Read More >

2021
11-19

shell中判断远程服务器中文件是否存在两种场景实战

判断一个文件的常见形式为if [ -f "/data/file.txt"];then     echo "true" else     echo "false" fi注意：1）中括号之间的空格；2）目录最好是绝对路径，在判断远程服务器中文件是否存在时尤为重要，因为集群之间有路径的变... Read More >

2021
11-18

nginx方向代理wss或ws

背景1、由于联调环境需要在内网或外网使用wss，这里使用Nginx作为代理实现ws或wss。2、WebSocket 在线测试： http://www.websocket-test.com/使用Nginx代理wsNginx配置如下server {     listen 80;      server_name   ws.phpmians... Read More >

2021
11-17

linux实现时间同步有哪几种方法

简介Linux实现时间同步的方法的有两种，分别是：1、使用ntpdate从时间服务器来更新时间，不需要自己做任何配置；2、使用ntp来搭建自己的时间服务器。由于硬件的原因，机器或多或少的跟标准时间对不上，误差几秒到几分钟不等。对于服务器来说时间不准会有很多麻烦。例如支付的时候，无法下单，游戏无法登录等。接下来将在文章中为大家分享Linux系统中如何实现时间同步，希望对大家有所帮助方法一：用ntpdate从时间服务器更新时间如果linux系统没有ntpdate这个命令，可以输入... Read More >

2021
11-16

linux下追查线上问题常用命令

找出当前系统内存使用量较高的进程方法1：ps aux | head -1;ps aux|grep -v PID | sort -rnk4 | head -10 方法2：top  然后 大写MM – 以内存占用率大小的顺序排列进程列表VIRT：virtual memory usage 虚拟内存1、进程“需要的”虚拟内存大小，包括进程使用的库、代码、数据等2、假如进程申请100m的内存，但实际只使用了10m，那么它会增长100m，而不是实际的使用量RES：residen... Read More >

2021
11-15

实例内存使用率过高

现象描述Linux 云服务器实例出现由内存问题引发的故障。例如，系统内部服务响应速度变慢、服务器登录不上、系统触发 OOM（Out Of Memory）等。可能原因可能是实例内存使用率过高等问题引起。通常情况下当实例内存使用率持续高于90%时，可判断为实例内存使用率过高。排查思路参考 处理步骤，判断问题是否由内存使用率过高引起。参考 其他内存问题典型案例分析，定位问题原因。处理步骤参考 相关操作，查看内存使用率是否过高。内存使用率过高，则执行下一步。内存使用率正常，则请参考... Read More >

2021
11-15

nginx和php-fpm两种通信方式对比UnixSocket和TcpSocket

一：概念tcp socket允许通过网络进程之间的通信，也可以通过loopback进行本地进程之间通信。unix socket允许在本地运行的进程之间进行通信。二：理论分析unix socket减少了不必要的tcp开销，而tcp需要经过loopback，还要申请临时端口和tcp相关资源。但是，unix socket高并发时候不稳定，连接数爆发时，会产生大量的长时缓存，在没有面向连接协议的支撑下，大数据包可能会直接出错不返回异常。tcp这样的面向连接的协议，多少可以保... Read More >

2021
11-15

linux内存回收之drop cache

Linux有自己完备的一套内存回收机制，并不需要人为的干预，但它同时也提供了一种手动释放的手段，可以让我们在调试的时候使用，方法是通过设置"/proc/sys/vm/drop_cache"参数。这个参数可接收3个数字的输入，分别是1, 2和3，写入1代表只释放page cache的可回收部分，写入2代表只释放slab cache中的可回收部分。可回收的slab cache是指在调用"kmem_cache_create"函数向slab分配... Read More >

2021
11-14

【揭秘】数据库面试葵花宝典，让你面试一次过

大家可以叫我老张，网名superZS！一直从事数据库行业10余年，工作于某数据库服务公司，兼数据库资深讲师，就面试中大家遇到的比较困惑的数据库问题，和刚进入数据库领域的同学们，我在这里给大家做一个详细的总结，希望对大家在工作或者面试中有所帮助，老师会倾囊相授，道行尚浅，大家相互学习！让我们努力学习技术，为了拿到高薪，追到心仪的姑娘，而奋斗吧！葵花宝典Question 1：你目前接触的mysql版本是什么？除了官方版本，还接触过其他的mysql分支版本嘛？产生分支的原因许多开发... Read More >

2021
11-14

实例内存未耗尽时触发 Out Of Memory

现象描述Linux 云服务器在内存使用率未占满的情况下触发了 OOM（Out Of Memory）。如下图所示：可能原因可能是由系统可用内存低于 min_free_kbytes 值导致。min_free_kbytes 值表示强制 Linux 系统最低保留的空闲内存（Kbytes），如果系统可用内存低于设定的 min_free_kbytes 值，则默认系统启动 oom-killer 或强制重启。具体行为由内核参数 vm.pa... Read More >

2021
11-14

JWT 避坑指南：nbf 验签失效问题的解决

背景最近sentry中有一个lumen项目经常收到一个报错，如下：Not Before (nbf) timestamp cannot be in the future如果隔几秒再请求（例如使用 Chrome 开发者工具中的 Replay XHR），就会成功。nbf 字段的原理查看上面的报错信息，会发现有一个 nbf，nbf 是 JWT 协议中的一个字段，是 Not Before 的缩写，表示 JW... Read More >

2021
11-13

TCP半连接队列满了会发生什么？又该如何应对

上一篇我们讲了全连接队列满的情况，有没看过的小伙伴可以先看上一篇：https://phpmianshi.com/?id=492下面我们实战下半连接队列慢的情况实战 - TCP 半连接队列溢出 如何查看 TCP 半连接队列长度？很遗憾，TCP 半连接队列长度的长度，没有像全连接队列那样可以用 ss 命令查看。但是我们可以抓住 TCP 半连接的特点，就是服务端处于 SYN_RECV 状态的 TCP 连接，就是在 TCP 半连接队列。于是，我们可以使用如下命令计算当前 TCP 半连... Read More >

2021
11-13

TCP全链接队列满的问题分析之net.core.somaxconn详解

背景最近控制台查看腾讯云服务器状态时，发现一个异常情况提示如下：该实例最近12小时内在2021-11-13 14:48出现过TCP全链接队列满的情况，为避免成为业务瓶颈，建议您检查业务健康情况。可参考文档：点击查看TCP 全连接队列满TCP 全连接队列的长度取 net.core.somaxconn 及业务进程调用 listen 时传入的 backlog 参数，两者中的较小值。TCP 全连接队列足最大值取决于 somaxconn 和 backlog 之间的最... Read More >

2021
11-13

lumen自带的redis queue注意事项

问题现象 Illuminate\Queue\MaxAttemptsExceededException/artisan in ?xxx_queue_name has been attempted too many times or run too long. The job may have previously timed out. 1.1 查找reason:  1.1.1 报错的job已执行成功，maxTries=1； 1.... Read More >

2021
11-13

数据库优化之降龙十八掌

技术老铁们，工作累了，我们就一起来放松一下！老张我呢是个金庸迷，在金庸小说中，降龙十八掌无愧巅峰外功，它的威力之大可想而知。而今儿，老张要给大家介绍18招式，来优化我们的 MySQL 数据库，让它跑起来更快，更稳定！之前老有学生问我，张老师该如何优化我们的 MySQL 数据库呢？这个问题太泛泛了，不是很具体！因为数据库的优化要从多个角度去考虑，通过不同的维度模型去排查问题。老师整理了下思路，大概可以从18个角度，大致四个方向去给大家一些建议。第一掌----亢龙有悔要想保证数据... Read More >

2021
11-13

TCP半连接队列和全连接队列满了会发生什么？又该如何应对

提纲什么是 TCP 半连接队列和全连接队列？ 在 TCP 三次握手的时候，Linux 内核会维护两个队列，分别是：    半连接队列，也称 SYN 队列；    全连接队列，也称 accepet 队列；服务端收到客户端发起的 SYN 请求后，内核会把该连接存储到半连接队列，并向客户端响应 SYN+ACK，接着客户端会返回 ACK，服务端收到第三次握手的 ACK 后，内核会把连接从半连接队列移除，然... Read More >

2021
11-12

MySQL数据库“十宗罪”（十大经典错误案例）

各位技术老铁们，福利来了！今天给大家说说《数据库中十大经典错误案例》老张我在刚开始学习数据库的时候，没少走弯路。经常会遇到各种稀奇古怪的 error 信息，遇到报错会很慌张，急需一个解决问题的办法。跟无头苍蝇一样，会不加思索地把错误粘到百度上，希望赶紧查找一下有没有好的处理问题的方法。我想这个应该是刚从事数据库的小白，都会遇到窘境。今天就给大家列举 MySQL 数据库中，最经典的十大错误案例，并附有处理问题的解决思路和方法，希望能给刚入行，或数据库爱好者一些帮助，今后再遇到任... Read More >