线上问题排查之golang使用json进行对象copy
作者：whoops本尊 发布时间：2023-10-06 05:03:23
标签：golang,排查,json,copy
前言：
记一次golang使用json进行对象copy的内存溢出问题排查
问题现象:新增的功能,灰度部署在k8s集群的服务,发现机器老是被打崩,因为是灰度,且控制了qps在100多,但是机器却崩溃。通过对灰度机器的监控。发现是内存太高导致机器挂掉。此次回顾一下排查历程。
增加GC次数,从而可以通过pprof去抓取内存使用情况：
将程序的GOGC由原先的2000改为200,从而增加GC次数,然后去抓取内存消耗情况
第一步操作完成,经验证机器可以正常运行,借助gops导出cpu运行图和内存消耗情况
①将编译好的linux版本的gops导入到目标机器上
②执行命令 gops 查看正在运行的程序的pid
③执行命令获取cpu运行状态 gops pprof-cpu 27
④执行命令获取内存消耗情况 gops pprof-heap 27
执行上述两个命令后,其会生成文件在tmp目录下 ：
//⑤将生成的文档下载到本地后,分别执行
go tool pprof -http=:8080 cpu_profile*
go tool pprof -http=:8081 heap_profile*
//在本地生成可视化
内存的火焰图如下 ：
cpu的火焰图如下：
通过对火焰图的分析,可以明显的看到json.Marshal 和 json.Unmarshal 有明显的占用问题。跟着火焰图去找寻调用此处的该方法,定位到
此处就不列出runtime.Context对象的具体情况了,你可以理解为里面多处指针,多处切片。反正就是结构体很大 【PS:改天针对大结构体出个压测结果】
发现问题后更换如下代码进行对象copy,注意此拷贝结构体不能有小写字母开头。另外建议尽量少进行对象copy,尽可能的细化到需要copy的地方
/**
* @Description:深拷贝数据 (慎用--结构体不能有小写字母开头)
*/
func DeepCopy(dst, src interface{}) error {
var buf bytes.Buffer
if err := gob.NewEncoder(&buf).Encode(src); err != nil {
return err
}
return gob.NewDecoder(bytes.NewBuffer(buf.Bytes())).Decode(dst)
}
来源：https://juejin.cn/post/7110217714559844366
0
投稿猜你喜欢
- 无法打开用户默认数据库，登录失败,这也是SQL Server使用者熟悉的问题之一。在使用企业管理器、查询分析器、各类工具和应用软件的时候，只
docker-compose.yal文件中： redis: image: redis container_name:- 本文实例讲述了php动态生成版权所有信息的方法。分享给大家供大家参考。具体实现方法如下：function copyright($start,
- 1：readline()file = open("sample.txt") while 1: line =
- 非常好的一篇技术文档，翻译自Louis Lazaris 2009年9月15日发表的《The Z-Index CSS Property: A
- 1. 直方图概述（1）基本概念直方图就是对图像的另外一种解释，它描述了整幅图像的灰度分布。直方图的 x 轴代表灰度值（0~255），y 轴代
- psutil是个跨平台库，能够轻松实现获取系统运行的进程和系统利用率，包括CPU、内存、磁盘、网络等信息。它主要应用于信息监控，分析和限制系
- Mysql 查询缓存 查询缓存的作用就是当查询接收到一个和之前同样的查询，服务器将会从查询缓存种检索结果，而不是再次分析和执行上次的查询。这
- 环境准备python3.5.4windows redispip install celerypip install rediswindows
- 由于之前有一个项目老是要打开文件，然后用pickle.load(file)，再处理。。。最后要关闭文件，所以觉得有点繁琐，代码也不简洁。所以
- 在VBScript中有Filter这个函数可以用来对数组进行过滤，并返回原数组的一个子集数组。语法说明： 引用内容Filter 函
- 下面有python教程栏目为大家建立一个完美的python项目，希望可以帮助到大家，一起讨论进步~当开始一个新的 Python 项目时，大家
- MySQL有多种存储引擎：MyISAM、InnoDB、MERGE、MEMORY(HEAP)、BDB(BerkeleyDB)、EXAMPLE、
- 一个可能你似曾相识的场景阅读内容包含大量英文的 PPT、Word、Excel 或者记事本时，由于英语不熟悉，为了流利地阅读，需要打开浏览器进
- 对于一个Dict：test_dict = {1:5, 2:4, 3:3, 4:2, 5:1}想要求key值大于等于3的所有项：print({
- 前言有时候在使用Python处理比较耗时操作的时候，为了便于观察处理进度，这时候就需要通过进度条将处理情况进行可视化展示，以便我们能够及时了
- 定义： 何为触发器？在SQL Server里面也就是对某一个表的一定的操作，触发某种条件，从而执行的一段程序。触发器是一个特殊的存储过程。
- 本文实例为大家分享了Python实现发送QQ邮件的封装代码，供大家参考，具体内容如下封装codeimport smtplibfrom ema
- 删除备份和还原历史记录表中所有早于 oldest_date 的备份集的项目。由于执行备份或还原操作时会在备份和还原历史记录表中添加行，sp_
- Codeigniter支持缓存技术，以达到最快的速度。尽管CI已经相当高效了，但是网页中的动态内容、主机的内存CPU和数据库读取速度等因素直
