分类目录归档：golang

2023
03-09

grpc etcdv3兼容问题 NEW

undefined: grpc.SupportPackageIsVersion6 grpc.ClientConnInterface由于etcd版本管理的问题，导致etcd的代码和新版本的grpc冲突,会在编译时报错:undefined: resolver.BuildOption undefined: resolver.ResolveNowOption undefined: balancer.PickOptions undefined:&nb... Read More >

2023
03-08

运行proto文件踩坑历程 NEW

大家如果觉得安装问题很多，也可以直接参考这篇文章，使用一键安装和版本控制PowerProto: gRPC工具链(protoc, protoc-gen-go)的一键安装与版本控制 ： /?id=4078一.安装protobufhttps://github.com/protocolbuffers/protobuf/releases在这里一定要确保你的protoc.exe是在你的gopath目录下，否则会报错protoc... Read More >

2023
03-07

PowerProto: gRPC工具链(protoc, protoc-gen-go)的一键安装与版本控制 NEW

‍PowerProto: gRPC工具链(protoc, protoc-gen-go)的一键安装与版本控制项目地址：github.com/storyicon/powerprotoPowerProto主要用于解决下面三个问题：    降低gRPC的使用门槛与使用成本。    解决protoc以及其相关插件（比如protoc-gen-go、protoc-gen-grpc-gateway）的版本控制问题... Read More >

2023
03-06

etcd安装及go简单操作

ETCD 介绍    概念： 高可用的分布式key-value存储，实现配置共享和服务发现    类似项目： zookeeper和consul    开发语言： Go    接口： 提供restful的http接口，使用简单    实现算法： 基于raft算法的强一致性，高可用的... Read More >

2023
03-05

go操作etcd实现服务注册和发现亲测版

服务发现etc/discovery/discovery.gopackage main import (    "context"    "go.etcd.io/etcd/api/v3/mvccpb"    clientv3 "go.etcd.io/etcd/client/v3" &nb... Read More >

2023
03-05

Go操作etcd亲测版

目录    一、服务发现    二、配置中心    三、分布式锁    四、为什么用 etcd 而不用ZooKeeper？        4.1 为什么不选择ZooKeeper？        4.2... Read More >

2023
03-04

grpc与etcd实现服务注册和服务发现亲测版

一、前言grpc中没有像go-micro那样集成可插拔式的etcd库使用，如何使得grpc能够使用服务注册发现及命名解析的功能，因此本文基于etcd实现了Name Resolver。二、所需的grpc版本grpc相关库：google.golang.org/grpc v1.45.0 google.golang.org/grpc/resolveretcd相关库：go.etcd.io/etcd/client/v3 v3.5.7所需的protoc protoc-... Read More >

2023
03-03

etcd clientv3 源码解读 - grpc负载均衡原理

1.  几个会反复出现的术语的理解resolver：解析器，可以粗暴理解为从一个字符串映射到一堆服务。比如经典的dns就是完成一个域名到一堆ip的映射解析，在etcd中，它自己定义了一个endpoint的解析器。有自己的格式，最终也是映射到服务地址。clientconns： 连接池。可以粗暴理解为这个池子缓存着与每个resolver解析后的地址的连接，数据哪里来呢？ 原始数据会根据resolver解析完存进来，然后后面介绍的balancer会小心的维护这个池子。ba... Read More >

2023
03-02

go语言中map拷贝 go map使用

背景线上golang服务报错fatal error: concurrent map iteration and map write问题map是线程不安全的,即使并发读写没有冲突也会报错 fatal error: concurrent map read and map writepackage main  import (    &... Read More >

2023
03-02

Go语言互斥锁（sync.Mutex）和读写互斥锁（sync.RWMutex）

Go语言包中的 sync 包提供了两种锁类型：sync.Mutex 和 sync.RWMutex。Mutex 是最简单的一种锁类型，同时也比较暴力，当一个 goroutine 获得了 Mutex 后，其他 goroutine 就只能乖乖等到这个 goroutine 释放该 Mutex。RWMutex 相对友好些，是经典的单写多读模型。在读锁占用的情况下，会阻止写，但不阻止读，也就是多个 goroutine 可同时获取读锁（调用 RLock() 方法；而写锁（调用 Lock()... Read More >

2023
03-01

对已经关闭的 channel 进行读写关闭操作会发生什么

1、关闭已经关闭的 channel 会引发 panic，panic: close of closed channelch3 := make(chan int, 3) wg.Add(1) go func() { for i := 1; i < 3; i++ { ch3 <- i } cl... Read More >

2023
03-01

优雅关闭channel

1 channel使用不当引发的问题示例1 重复关闭channelfunc main(){  ci:=make(chan int)  close(ci)  close(ci)}复制「编译不会提示错误，运行直接报错」panic: close of closed channel goroutine 1 [running]:示例2 向已关闭的channel中发送消息func main() { &nbs... Read More >

2023
01-01

gRPC简介和使用亲测版

简介gRPC  是一个高性能、开源和通用的 RPC 框架，面向移动和 HTTP/2 设计。目前提供 C、Java 和 Go 语言版本，分别是：grpc, grpc-java, grpc-go. 其中 C 版本支持 C, C++, Node.js, Python, Ruby, Objective-C, PHP 和 C# 支持.gRPC 基于 HTTP/2 标准设计，带来诸如双向流、流控、头部压缩、单 TCP 连接上的多复用请求等特。这些特性使得其在移动设备上表现更好，... Read More >

2022
01-19

如何从golang的字符串中找到表情符号？

问题我想知道表情符号是否存在，并替换为字符串（HTML unicode）。（符文到字符串）例如，这是一个句子i like you hahahah ? hello.这就是结果。i like you hahahah &#128512; hello.表情符号和表情符号位置是随机的。解决方案我们可以将字符串转换为[]rune，并将每个符文转换为ASCII或HTML实体packa... Read More >

2022
01-18

gorm中emoji表情入库乱码修复

背景新项目gin+gorm后端接口接收数据(包含emoji表情符号)后存入mysql 乱码乱码问题一般是下面几个方面造成的，我们依次检查数据库服务器编码检查 /etc/my.cnf 配置[client] default-character-set=utf8mb4 [mysqld] character-set-server=utf8mb4 collation-server = utf8mb4_unicode_ci  ... Read More >

2022
01-17

Golang Context是好的设计吗？

1、What ContextContext是Golang官方定义的一个package，它定义了Context类型，里面包含了Deadline/Done/Err方法以及绑定到Context上的成员变量值Value，具体定义如下：type Context interface {    // 返回Context的超时时间（超时返回场景）    Deadline() (d... Read More >

2022
01-16

开放分布式追踪（OpenTracing）简介

分布式系统的运维挑战容器、Serverless 编程方式的诞生极大提升了软件交付与部署的效率。在架构的演化过程中，可以看到两个变化：    1. 应用架构开始从单体系统逐步转变为微服务，其中的业务逻辑随之而来就会变成微服务之间的调用与请求。    2. 资源角度来看，传统服务器这个物理单位也逐渐淡化，变成了看不见摸不到的虚拟资源模式。从以上两个变化可以看到这种弹性、标准化的架构背后，原先运维与诊断... Read More >

2022
01-15

golang分布式链路追踪系统-jaeger安装与简单使用

简介jaeger是一个比较有名的分布式链路追踪系统，底层用golang实现，兼容opentracing标准。    文档地址：docs    github地址：github    官网：website    blog：blog部署我们用docker部署，集成整套环境all-in-one，docker地址：https:/... Read More >

2022
01-14

golang内存对齐

unsafe.Sizeof(x)在Go语言中，我们可以通过 unsafe.Sizeof(x) 来确定一个变量占用的内存字节数（不包含 x 所指向的内容的大小）例如对于字符串数组，在64位机器上，unsafe.Sizeof() 返回的任意字符串数组大小为 24 字节，和其底层数据无关：func main() {  s := []string{"1", "2", &qu... Read More >

2022
01-13

redis延迟队列golang高效实践

一、背景业务中经常会有这样的场景：到期后自动执行指定操作；查询某个任务是否完成，未完成等待一定时间再次查询；回调通知，当回调失败时，等待后重试；等等还有其他很多类似的场景。很多时候我们会直接通过一个本地定时器来帮我们完成这个任务。如果我们的系统是多实例分布式的，本地定时器就会面临很多问题，如：怎么保证重复处理的问题；统一管控的问题等等。面对本地定时器遇到的问题，我们可以使用分布式延迟队列来实现。这里介绍一种使用golang基于redis实现延迟队列的具体实践。二、实现原理1、... Read More >