Go的slice扩容不是全部都按照1.25扩容的,还有内存对齐的概念,别再被忽悠了

CondaHTTPError: HTTP 404 NOT FOUND for url 用conda创建新环境时出现问题了。 阅读详情

Go的slice扩容机制-公粽号:堆栈future

扩容

说实话,我看到别的文章中说slice的扩容很简单,小于1024,按照两倍去扩容;大于等于1024,按照1.25去扩容;像这样不负责任的文章误导初学者使我非常不爽,今天就给大家带来源码级别的slice扩容机制,别怕,一切都是那么简单。

1. 先看一个例子(<1024)

package main

import "fmt"

func main() {
 s1 := make([]int, 1023)
 s2 := make([]int, 1)
 s1 = append(s1, s2...)
 fmt.Println(cap(s1), len(s1))
}

输出结果是:
2048 1024

从结果可以看出,小于1024的确实按照2倍去扩容的,我们不妨计作:
f(x) = 2x (x<1024)

大家知道为什么是1024吗?有人问过go作者,说为啥不是2048啊之类的,你猜作者怎么回答,非常简单的一句话:因为在计算机世界中1024这个数字很特别,它就是一个数字,是一个以2为底,10为指数的数,就这样简单。所以有时候大家看源码别纠结细节,一旦陷入就要请求旁边的高人将自己解救出来呀。

2. 再看一个例子(>=1024)

package main

import "fmt"

func main() {
 s1 := make([]int, 1024)
 s2 := make([]int, 258)
 s1 = append(s1, s2...)
 fmt.Println(cap(s1), len(s1))
}

输出结果是:
1696 1282

从结果可以看出,大于等于1024,不是按照1.25(1+1/4)的倍速增长的,所以:
f(x) = x + x/4 (x>=1024)就突然不成立了,这到底是为什么?是不是想要一探究尽呢?接下来剖析源码就知道啦。

3. 两个函数

f(x) = 2x (x<1024)
f(x) = x + x/4 (x >= 1024)

确认:函数1成立,函数2在有些条件下成立 嗯?为什么在有些条件下成立呢?再看一个例子:

package main

import "fmt"

func main() {
 s1 := make([]int, 1024)
 s2 := make([]int, 1)
 s1 = append(s1, s2...)
 fmt.Println(cap(s1), len(s1))
}

输出结果是:
1280 1025

我们可以带函数2去计算下:f(1024) = 1024 + 1024/4 = 1024 + 256 = 1280你看这样的就可以满足函数2了,接下来分析下上面不满足函数2的例子。

4. 源码剖析不满足1.25增速的原因

在源码中主要是看growslice这个函数。

func growslice(et *_type, old slice, cap int) slice {
 ...
 ...
 ... //省略前面无关紧要的代码
 newcap := old.cap
 doublecap := newcap + newcap
 if cap > doublecap {
  newcap = cap
 } else {
  if old.len < 1024 { //小于1024 double就可以
   newcap = doublecap
  } else {
   for 0 < newcap && newcap < cap { // 容量比之前大,那么按照1.25的倍速增长
    newcap += newcap / 4
   }
  }
 }
 ... //省略部分代码
 var lenmem, newlenmem, capmem uintptr
 switch {
  
 ... //省略
 
 case et.size == sys.PtrSize:
  lenmem = uintptr(old.len) * sys.PtrSize
  newlenmem = uintptr(cap) * sys.PtrSize
  // 看这里 核心函数roundupsize 按照内存字节对齐
  capmem = roundupsize(uintptr(newcap) * sys.PtrSize)
  overflow = uintptr(newcap) > maxAlloc/sys.PtrSize
  newcap = int(capmem / sys.PtrSize) //1696
    
 ...//省略部分代码
 
 }
}

好了按照代码流程先走一遍:

  1. 首先我们的长度是大于等于1024的,那么按照上面逻辑先计算得出:f(1024)=1280,发现其实空间还不够,那么继续扩容f(1280)=1280+1280/4=1600。

  2. 紧接着进入switch case中,这里的sys.PtrSize=8,而我们的et.size因为是int存储所以也是8,刚好命中这个case,进入。

  3. 然后计算新元素capmem=roundupsize(uintptr(newcap) * sys.PtrSize),则capmem=roundupsize(1600*8)=roundupsize(12800)。

  4. 在roundupsize函数中size=12800<_MaxSmallSize(32768),并且size<=smallSizeMax(1024)-8不满足,所以最终进入else代码段。

func roundupsize(size uintptr) uintptr {
 if size < _MaxSmallSize {
  if size <= smallSizeMax-8 {
   return uintptr(class_to_size[size_to_class8[divRoundUp(size, smallSizeDiv)]])
  } else {
   // 进入到这里
   return uintptr(class_to_size[size_to_class128[divRoundUp(size-smallSizeMax, largeSizeDiv)]])
  }
 }
 if size+_PageSize < size {
  return size
 }
 return alignUp(size, _PageSize)
}

// divRoundUp returns ceil(n / a).
func divRoundUp(n, a uintptr) uintptr {
 // a is generally a power of two. This will get inlined and
 // the compiler will optimize the division.
 return (n + a - 1) / a
}


  1. 看下class_to_size和size_to_class128
const (
 _MaxSmallSize   = 32768
 smallSizeDiv    = 8
 smallSizeMax    = 1024
 largeSizeDiv    = 128
 _NumSizeClasses = 67
 _PageShift      = 13
)

var class_to_size = [_NumSizeClasses]uint16{
0, 8, 16, 24, 32, 48, 64, 80, 96, 112, 
128, 144, 160, 176, 192, 208, 224, 240, 
256, 288, 320, 352, 384, 416, 448, 480, 
512, 576, 640, 704, 768, 896, 1024, 1152, 
1280, 1408, 1536, 1792, 2048, 2304, 2688, 
3072, 3200, 3456, 4096, 4864, 5376, 6144, 
6528, 6784, 6912, 8192, 9472, 9728, 10240, 
10880, 12288, 13568, 14336, 16384, 18432, 
19072, 20480, 21760, 24576, 27264, 28672, 32768}


var size_to_class128 = [(_MaxSmallSize-smallSizeMax)/largeSizeDiv + 1]uint8{
32, 33, 34, 35, 36, 37, 37, 38, 38, 
39, 39, 40, 40, 40, 41, 41, 41, 42, 
43, 43, 44, 44, 44, 44, 44, 45, 45, 
45, 45, 45, 45, 46, 46, 46, 46, 47, 
47, 47, 47, 47, 47, 48, 48, 48, 49, 
49, 50, 51, 51, 51, 51, 51, 51, 51, 
51, 51, 51, 52, 52, 52, 52, 52, 52, 
52, 52, 52, 52, 53, 53, 54, 54, 54, 
54, 55, 55, 55, 55, 55, 56, 56, 56, 
56, 56, 56, 56, 56, 56, 56, 56, 57, 
57, 57, 57, 57, 57, 57, 57, 57, 57, 
58, 58, 58, 58, 58, 58, 59, 59, 59, 
59, 59, 59, 59, 59, 59, 59, 59, 59, 
59, 59, 59, 59, 60, 60, 60, 60, 60, 
60, 60, 60, 60, 60, 60, 60, 60, 60, 
60, 60, 61, 61, 61, 61, 61, 62, 62, 
62, 62, 62, 62, 62, 62, 62, 62, 62, 
63, 63, 63, 63, 63, 63, 63, 63, 63, 
63, 64, 64, 64, 64, 64, 64, 64, 64, 
64, 64, 64, 64, 64, 64, 64, 64, 64, 
64, 64, 64, 64, 64, 65, 65, 65, 65, 
65, 65, 65, 65, 65, 65, 65, 65, 65, 
65, 65, 65, 65, 65, 65, 65, 65, 66, 
66, 66, 66, 66, 66, 66, 66, 66, 66, 
66, 67, 67, 67, 67, 67, 67, 67, 67, 
67, 67, 67, 67, 67, 67, 67, 67, 67, 
67, 67, 67, 67, 67, 67, 67, 67, 67, 
67, 67, 67, 67, 67, 67}



  1. 通过函数divRoundUp(size-smallSizeMax, largeSizeDiv)计算出:divRoundUp(12800-1024, 128) = divRoundUp(12800-1024, 128) = (12800-1024+128-1) / 128 = 11903/128=92

  2. 我们根据92在size_to_class128中找到是57,然后在class_to_size中根据索引57找到是13568。

  3. 所以roundupsize函数返回13568,而newcap = int(capmem / sys.PtrSize) = 13568/8 = 1696,至此我们就求出来cap的最终容量是1696啦。

  4. 注意我的go源码版本是go1.16.7

5. 小结

看完源码之后心情舒爽,我相信大家肯定会更自信了,不管同事问你还是面试官问你,你可以自豪的给他从源码角度分析了,而且别人一听就能判断出你是读过源码的,求知欲满满!

如果你觉得这篇文章对你帮助很大,请你转发、分享、关注、点赞哦,写作不易,还望大家多多支持哈。

公粽号:堆栈future

使很多处于迷茫阶段的coder能从这里找到光明,堆栈创世,功在当代,利在千秋

125篇原创内容

图片

华为OD机试真题2026双机位C卷 Java&Go 实现【用户入网定期复评】 用户开立支付账户,在开户完成后立即对用户进行一次风险模型评级,输出一个评分风险,评分范围1-100,等区间的分为5个等级,1-19为等级1,20-39为等级2,40-59为等级3,60-79为等级4,80-100为等级5,系统每天会任务对全量入网用户进行计算复评时间,输出评分给出新的风险等级。复评规则如下: 阅读详情

相关推荐

保姆级教程:用torch.profiler给你的vLLM推理做个“全身体检”(附Perfetto可视化分析)

本文提供了一份详细的vLLM推理性能分析教程,通过torch.profiler和Perfetto工具链实现从数据采集到可视化分析的全流程。文章涵盖了环境配置、性能数据采集、trace文件解析以及Perfetto可视化分析,帮助开发者优化大模型推理服务的性能,显著降低计算资源消耗。

weixin_29041767的博客 357

Go 1.25新特性前瞻:GC提速,容器更“懂”Go,json有v2了!

并且,和之前的版本一样,Go 1.25 带来的许多改进,都如同“无形之手”,你可能无需修改一行代码,甚至无需刻意感知,只需简单升级,便能享受到性能的飞跃、诊断能力的提升以及潜藏错误的暴露。我鼓励所有 Go 开发者,积极尝试 Go 1.25 RC1 版本,将其应用到你的开发、测试环境中,并向 Go 团队提供宝贵的反馈。这门进阶课程,是我多年 Go 实战经验和深度思考的结晶,旨在帮助你突破瓶颈,从“会用 Go”迈向“精通 Go”,真正驾驭 Go 语言,编写出更优雅、更高效、更可靠的生产级代码!

TonyBai 2353

用VINS-Fusion跑通EuRoC数据集:Ubuntu22.04+ROS2环境下的保姆级评测指南

本文详细介绍了在Ubuntu22.04和ROS2 Humble环境下使用VINS-Fusion处理EuRoC数据集的完整流程。从环境配置、数据集转换到参数调优和性能评估,提供了一套全面的多传感器融合分析方案,帮助开发者在无人机精准定位场景中实现高效部署与优化。

weixin_29212867的博客 517

Go 1.25 正式发布:聚焦性能、云原生与开发者体验

Go 1.25发布:性能与云原生双升级 Go 1.25正式发布,在保持向后兼容的同时带来多项关键改进。新版重点优化了运行时性能与云原生适配性,包括: 实验性Green Tea GC可提升10%-40%性能 自动适配容器CPU配额,优化容器环境并发性能 JSON处理性能提升4倍以上,支持零分配解码 新增WaitGroup.Go()简化并发代码 统一nil指针行为,强制错误检查 开发者体验方面增强了测试工具链,并默认启用DWARF5减小调试信息体积。建议开发者重点检查JSON处理、nil指针使用等兼容性问题,容

sanrentai的博客 2403

SpringDoc 基本使用指南

SpringDoc 凭借零配置启动注解简洁和深度兼容 Spring 生态的优势,已成为 Spring Boot API 文档的首选工具。自动化- 减少手动维护文档的成本;标准化- 严格遵循 OpenAPI 3 规范;可扩展- 分组、安全控制灵活适配复杂项目。访问即可查看交互式文档(默认路径)

墨鸦的博客 1万+

游戏开发实战:如何在Unity中实现六边形网格地图(附完整代码)

本文详细介绍了在Unity中实现六边形网格地图的完整开发流程,从数学原理到实战代码。涵盖三种主流坐标系转换方法、距离计算算法对比、网格生成与渲染技巧,以及高级功能如网格高亮、寻路算法和性能优化策略。适合策略游戏、战棋类游戏开发者提升地图系统开发效率。

652

Go 1.25新提案:GOMAXPROCS默认值将迎Cgroup感知能力,终结容器性能噩梦?

为了适应CPU限制或亲和性可能在运行时发生变化的情况(例如 Kubernetes的 "in place vertical scaling" 特性允许动态调整Pod的limits.cpu),Go运行时将引入一个后台机制(可能在sysmon协程中实现),以较低频率(例如,提案建议最小周期30秒,最长1分钟)定期重新检查CPU亲和性设置和Cgroup的CPU quota文件。32个活跃的Go线程争抢远少于此的可用CPU时间片(在此例中仅相当于1个CPU的时间),迫使操作系统内核进行大量、且低效的线程上下文切换。

TonyBai 1329

YonBIP 3.0 报表开发+报表超链接

用友报表开发

m0_55096250的博客 1759

Go1.25 新特性:引入 DWARF5,链接器更快,二进制文件更小了!

本次 Go1.25 新特性旨意,在 Go 编译器使用 DWARF5,给 Go 应用程序的综合多个方面带来了不错的提升,提升了 Go 在编译和体积等原本强项上的更进一步提高。Go 这一门编程语言,在推出时,相较个别语言来讲,编译后较为小的二进制文件是一个较大的卖点。而本次在 Go1.25 新特性中,又针对缩小编译后二进制文件有了新的改善。:可执行文件总大小平均下降 3%,可视为 DWARF5 更紧凑的调试信息格式的直接成果。使用较老的 DWARF 格式,结构简单、兼容性强,但体积大、功能有限。

EDDYCJY的博客 1765

060、模型蒸馏:把扩散模型压进单步的魔法

《端侧文生图模型蒸馏实战:从32步到1步的优化之道》摘要:针对边缘设备部署难题,本文分享了扩散模型蒸馏的核心经验。通过重构损失函数(感知损失+对抗训练+KL散度)、优化采样轨迹截取策略和改造学生模型架构,成功将Stable Diffusion压缩至单步推理。关键发现包括:小批量训练更有效、标签平滑保障生成多样性、双模型策略平衡质量与速度。在Cortex-A53芯片上实现300ms内生成,内存占用控制在200MB以下。特别强调工业部署需权衡压缩率与稳定性,建议保留迭代模式开关以适配不同场景需求。

2601_95651806的博客 150

【ubuntu24.04】auto remove后,重启,kernel panic ,please reboot your computer vfs unable to mount root fs

Ubuntu 24.04系统在运行auto remove后出现内核恐慌(kernel panic)无法启动,显示"VFS: unable to mount root fs"错误。该问题是由于当前内核被清除导致系统无法挂载根分区。解决步骤包括:1)尝试用GRUB菜单中的旧内核启动;2)在GRUB中临时编辑启动参数;3)使用Ubuntu启动盘进行chroot修复;4)使用Boot-Repair工具一键修复。成功启动后,需要重新安装linux-generic等元包,重建initramfs并更新

突围 1209

Go 1.25 新功能:深入了解 JSON v2 及更多

Go 1.25 带来了性能改进、工具链更新以及备受期待的 encoding/json v2 预览版。本文按照版本发布公告顺序,梳理主要变化,并重点阐述为何 json v2 是近年最值得关注的升级之一。

分享 Go、云原生、AI Infra 相关技术 2238

干货满满!AI应用架构师分享AI驱动虚拟展示干货

虚拟展示(Virtual Presentation):用数字技术将物理对象/场景转化为可交互的虚拟内容(比如3D文物、虚拟试衣间);AI驱动(AI-Powered):通过AI技术实现实时交互、智能决策、个性化生成,让虚拟内容“活”起来;AI驱动虚拟展示:以用户体验为核心,将“3D渲染+AI理解+实时数据”融合,形成“感知-决策-反馈”的闭环系统。前端交互层是用户直接体验到的部分,再厉害的AI和渲染,只要前端交互烂,用户都会跑。我见过很多团队为了“炫技”做了复杂的AI功能,结果用户不会用。

AI大模型应用之禅 535

golang 切片 append 扩容性能分析

很多时候,我们对这个功能点不够重视,经常也会写一些没有声明 cap 容量的变量声明,然后直接调用 append,逻辑上是没有问题的,但是当 append 的数量足够多的时候,性能问题就突出来了。

小知识折射大智慧 1961

jdk-8u144-linux-x64.tar.gz.

该资源为搭建Linux系统Java环境用,资源的后缀为tar.gz格式的压缩包

ssm框架搭建

这个是一个在idea上成功跑起来的ssm框架项目,保存在这里方便以后使用直接下载

Go 1.24 发布:性能更快,工具更强大,引领编程语言的新纪元

2025年2月12日,Go编程语言团队正式发布了Go 1.24版本,这是该语言近年来最具里程碑意义的一次升级。Go 1.24版本在性能、工具链、WebAssembly支持以及标准库方面都做出了显著的提升,充分体现了Go团队在提高语言效率和可用性方面的不断努力。此次更新不仅增强了Go的泛型编程能力,还进一步优化了运行时性能,丰富了工具链,并通过增加新的库函数简化了开发过程。本文将详细介绍Go 1.24的核心新特性和改进。

网络技术联盟站 1841

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

golang 1.18后的切片扩容机制

切片扩容机制变化

weixin_43204583的博客 1972

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

Go中slice的扩容机制以及对齐规则分析

介绍了go中slice的扩容原则为什么要这么扩容,扩容过程中的对齐机制

slnsuya的博客 2061

深度解密Go语言之Slice

目录 当我们在说 slice 时,到底在说什么 slice 的创建 直接声明 字面量 make 截取 slice 和数组的区别在哪 append 到底做了什么 为什么 nil slice 可以直接 a...

weixin_30532837的博客 307

Golang 中的 slice 详解

go 语言中的 slice 详解

lp15929801907的博客 3579

Golang中切片的内存对齐规则

Golang,数组,切片

zichengzhilian的博客 479

2024年最新Golang 中的 slice 详解_golang slice(2),2024年最新拥有百万粉丝的大牛讲述学Golang的历程

于是,s2 另起炉灶,将原来的元素复制新的位置,扩大自己的容量。深拷贝,拷贝的是数据本身,完全复制了底层数据结构,而不是复制指向底层数据结构的指针,会创建一个新对象,新对象和原对象不共享内存,它们是完全独立的,修改新对象的值不会影响原对象值,内存地址不同,释放内存地址时,可以分别释放。(2)数组是值类型,切片是引用类型,每个切片都引用了一个底层数组,切片本身不能存储任何数据,都是底层数组存储数据,修改切片的时候修改的是底层数组中的数据,切片一旦扩容,会指向一个新的底层数组,内存地址也就随之改变。

2401_84925335的博客 493

Golang: 切片扩容机制源码分析

切片在append的过程中,当len > cap时,会触发切片的扩容机制。扩容时会分配一个容量更大的底层数组,并把原来切片的元素复制到新底层数组中,再添加新元素进去。扩容机制分为两部分:计算新容量(确定大致容量)、内存对齐(获取真实的扩容后容量)。

weixin_44863451的博客 871

golang内存对齐

内存对齐 go属于c语言家族,很多概念与c语言相同。内存对齐也可以叫做内存地址的对齐。至于为什么需要内存对齐,主要有以下两个原因: 高效,cpu每次读取一个自然字(取决于架构,32位架构上为4字节,64位架构上为8字节),如果地址都是对齐的,那么cpu一个周期就可读取需要数据,如果存在跨内存边界的情况则需要进行多次读取拼接操作,则就无形增加了cpu的负担 跨平台,在某些硬件平台上仅能在特定地址上访问特定类型,从特定地址开始存取,如果没有内存保证硬件可能会报告错误 go中的内存对齐保证 golang对齐保

how2js的博客 310

Golang内存对齐

Golang内存对齐

weixin_43871135的博客 1453

Go语言详解内存对齐

目录Go语言详解内存对齐前情概要何为内存对齐为何要有内存对齐对齐系数结构体的内存对齐规则举个例子成员变量顺序对内存对齐带来的影响空结构体字段对齐考虑内存对齐的设计 Go语言详解内存对齐 前情概要 在了解内存对齐之前,先来明确几个关于操作系统的概念,更加方面我们对内存对齐的理解。 内存管理:我们都知道内存是计算中重要的组成之一,内存是与CPU进行沟通的桥梁,用于暂存CPU中的运算数据、以及与硬盘等外部存储器交换的数据。早期,程序是直接运行在物理内存上的,直接操作物理内存,但是会存在一些问题,比如使用效率低、地

qq_53267860的博客 1418

Golang优化之内存对齐

前文 话说今天在用uintptr进行指针运算的时候,突然想起来有个内存对齐的东西,那么对这个uintptr计算是否会有影响? 带着疑问,开始吧。 你将获得以下知识点: 1.什么是内存对齐? 2.为什么需要内存对齐? 3.如何进行内存对齐? 4.golang的内存对齐如何体现? 5.如何利用内存对齐来优化golang? 正文 1.什么是内存对齐? 在想象中内存应该是一个一个独立的字节组成的。像这样:...

咖啡色的羊驼 4004
上一篇: CPU缓存读写以及一致性问题,你大学课堂睡过去的现在再温习下,绝对受益颇多
下一篇: Go微服务架构实战-中篇 1. k8s架构介绍
stackfuture
博客等级 码龄5年 23粉丝 38原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值