B站Golang技术栈分析

最新推荐文章于 2025-05-10 22:57:16 发布
转载 最新推荐文章于 2025-05-10 22:57:16 发布 · 761 阅读 · 5 ·
CC 4.0 BY-SA版权
原文链接：https://studygolang.com/articles/19995
文章标签：

#golang

本文详细介绍了B站使用的微服务框架Kratos，包括RPC、HTTP框架、服务注册与发现、存储、搜索、小文件存储、消息队列、日志、配置中心、监控、trace和研发流程管理等技术组件。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

技术栈技术选型参考链接
RPC基于grpc封装的warden框架, 已开源https://github.com/bilibili/kratos
HTTP框架基于gin封装的blade master框架, 已开源同上
服务注册与发现初期为zk, 后面逐步改为参考Spring Cloud体系Eureka自研的discovery已开源 https://github.com/bilibili/discovery
存储DB, redis, memcache, hbase存储一些用户kv信息和历史流水, 已封装好库 library/database/client库已开源 https://github.com/bilibili/kratos
搜索B站视频, 用户, 历史记录等使用es搜索, 客户端已封装在基础库中 library/database/elastic
小文件存储毛剑个人研发的bfs, 已开源.https://www.toutiao.com/i6272104949560115714/https://github.com/Terry-Mao/bfs
消息队列基于kafka封装的databus
log基于uber的zap封装的日志框架
配置及配置中心支持从环境变量读取配置, 从toml中解析配置, 支持远程配置中心(自研, mysql存储, 本地落地,http协议, long poll, 客户端有更新事件, 类似于携程开源的Apollo)
监控使用开源的prometheus, 框架和库(sql, redis, hbase等)中已预埋计数点和时间统计点, 同时也可以在业务逻辑中打点. library/stat/stat.go
tracetrace似乎是基于agent的方式, 使用unix domain socket进行传送, 框架和库已预埋点. library/net/trace.go
研发流程管理TAPD,  有相关的tapd struct信息

其中RPC, HTTP框架, 数据访问的一些库封装, 包括生成工具, 均以kratos项目在github开源了(https://github.com/bilibili/kratos ）Kratos是bilibili开源的一套Go微服务框架，包含大量微服务相关框架及工具)

B站目前使用及封装的中间件的详细介绍在Gopher China 2017 B站的分享有提到原理和使用情况.
https://mp.weixin.qq.com/s/4uA6iE7HC_SAfdIATAdrrA
bfs介绍
https://www.jianshu.com/p/923917220d23
B站运维体系发展
https://myslide.cn/slides/3840

Golang领域性能分析的最佳实践分享
Golang编程笔记的博客
05-08 1181
在云计算与微服务架构普及的今天，Golang凭借高效的并发模型和简洁的语法，成为构建高性能后端服务的首选语言。然而，随着业务规模扩大，程序性能问题（如CPU过载、内存泄漏、goroutine泄漏）逐渐凸显。标准库pprof工具链的深度应用性能指标的量化分析方法典型性能瓶颈的诊断流程工程化调优的最佳实践核心概念解析建立知识框架算法原理与数学模型夯实理论基础完整项目案例演示实操流程典型场景分析提升应用能力Profile：性能分析数据文件，包含函数调用栈、资源占用等信息火焰图。
了解 Golang 领域内存管理，开启高效编程之旅
Golang编程笔记的博客
04-16 1430
Golang（简称Go）作为云计算、微服务、高并发领域的主流语言，其内存管理机制是高性能实现的关键支撑。本文将系统解析Go内存管理的核心组件（如栈、堆、垃圾回收器）、内存分配策略、逃逸分析原理及性能优化实践，帮助开发者从"知其然"进阶到"知其所以然"，最终实现高效内存管理。核心概念：区分栈与堆，解析Go内存模型底层原理：垃圾回收算法、内存分配策略深度剖析实战优化：逃逸分析、pprof工具使用、典型场景调优工具与资源：高效开发必备工具链及学习资料栈（Stack）
B站新一代golang规则引擎的设计与实现
leijmdas的专栏
04-05 1087
曾经，我所在的一个在某行业属独角兽的公司，做风控，以数据过规则的模式来实现风控防刷，使用java实现的drools规则引擎，规则中加载了一个随机森林模型，需要取十几个指标，这些指标还是从redis中取回来的，因为drools只支持顺序执行模式，加载的所有规则都以顺序模式执行，规则内的取指标也不例外。)的时候，数据就会发生严重堆积，最后经确认，就是这个加载了随机森林的规则导致的，因此，只要把随机森林这个模型规则一停，堆积瞬间消除。规则引擎选择一个优先级最高规则的最先执行，剩下的规则并发执行。
GO语言技术栈
growbit的博客
01-09 1250
以上是Go语言技术栈的一些主要组件，根据具体需求和技术选型，还可以添加其他技术和工具。
先聊聊「堆栈」，再聊聊「逃逸分析」(1)，通宵都要看完这个Golang关键技术点
2401_84240189的博客
04-19 806
但是，当编译器无法证明函数返回的变量有没有被引用时，编译器就必须在堆上分配该变量，以此避免悬挂指针（dangling pointer）的问题。我们再简单修改一下代码，将切片的容量和长度修改为1，再次查看逃逸分析的结果，我们发现，没有发生逃逸，内存默认分类到了栈上。，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。我们通过控制台的输出结果可以很明显的看出：发生了逃逸，分配到了heap堆中。所以，当变量占用内存较大时，会发生逃逸分析，将内存分配到堆上。
golang实现栈
李三思的博客
08-07 1167
golang实现栈
现代的服务端技术栈：Golang/Protobuf/gRPC
低代码开发，数据，中间件，企业架构原创技术分享
05-08 517
本文由公众号EAWorld翻译发表，转载需注明出处。作者：Velotio Technologies译者：白小白原文：http://t.cn/EaQTFFv原题：Intro...
AI技术栈与传统工程的对比
AI天才研究院
11-06 762
引言 随着科技的飞速发展，人工智能（AI）技术已经成为现代工程领域的重要驱动力。AI技术不仅改变了传统的数据处理方式，还为各个行业带来了前所未有的创新机遇。本篇文章将以《AI技术栈与传统工程的对比》为主题，深入探讨AI技术栈与传统工程之间的差异与联系，帮助读者更好地理解和掌握这一前沿技术。 首先，我们需要明确什么是AI技术栈。AI技术栈是指一组
Golang 领域 Trace 实战：性能分析与优化指南
最新发布
Golang编程笔记的博客
05-10 1035
在云计算与微服务架构普及的今天，Golang凭借高效的并发模型和简洁的语法成为后端开发的热门选择。Goroutine泄漏导致内存持续增长锁竞争引发的并发瓶颈系统调用延迟异常函数调用栈深度过高等本文聚焦Golang内置的工具，完整覆盖从基础原理到生产环境优化的全流程，通过真实案例演示如何利用追踪数据定位并解决性能问题。核心概念：解析Trace系统架构与数据流向工具链：整合与可视化工具链实战指南：从简单程序到微服务的完整优化案例最佳实践：生产环境中的追踪策略与注意事项Trace。
一篇文章带你读懂Golang技术
guo162308的博客
07-15 670
**控制结构**：Go语言的控制结构包括`if`、`switch`、`for`和`defer`。- **基本数据类型**：包括整型`int`、浮点型`float64`、布尔型`bool`等。- **并发同步**：使用`sync`包中的`Mutex`和`WaitGroup`进行同步。- **Goroutine**：Go协程，是一个轻量级的线程，由Go运行时管理。- **HTTP服务**：使用`net/http`包创建HTTP服务。- **变量声明**：使用`var`关键字或通过类型推断声明变量。
第四课 golang数据结构和算法-栈
QnHyn
09-18 562
第四课 golang数据结构和算法-栈 tags: golang 2019尚硅谷 categories: golang 栈 文章目录第四课 golang数据结构和算法-栈第一节 栈的基本用法1.1 栈的介绍1.2 栈的应用场景第二节 使用数组模拟栈第三节 栈实现简单综合计算器 第一节 栈的基本用法 1.1 栈的介绍 有些程序员也把栈称为堆栈，即栈和堆栈是同一个概念 栈的英文为(stack) 栈是一个先入后出(FILO-First In Last Out)的有序列表 栈(stack)是限制线性表中
Go语言的全栈开发
2501_91185975的博客
03-19 656
Go语言是由Google在2007年开发的开源编程语言，旨在解决大型系统开发中的一些不足，尤其是在并发处理和编译速度方面。Go语言的语法简洁，内置了强大的并发支持，程序员可以很方便地利用goroutine来处理并发任务。此外，Go语言还拥有丰富的标准库和良好的工具链，进一步提升了开发效率。Go语言作为一种现代编程语言，凭借其高效的并发处理能力和简洁的语法，成为全栈开发中不可或缺的工具之一。通过将Go语言的后端技术和现代前端框架结合，开发者能够构建出高效、易于维护的全栈应用。
golang常见数据结构之栈
SMILY12138的博客
04-10 647
在上面的代码中，我们首先定义了一个Stack类型，它是一个包含int类型的slice。Push方法用于将一个元素添加到栈中，Pop方法用于弹出栈顶元素并返回该元素的值，Peek方法用于返回栈顶元素的值，但不会弹出该元素，IsEmpty方法用于判断栈是否为空。在main函数中，我们创建了一个Stack对象，并分别将1、2、3三个元素加入栈中。然后我们调用Peek方法返回栈顶元素的值，调用Pop方法两次弹出栈顶元素并返回，最后调用IsEmpty方法判断栈是否为空。Golang提供了stack包来实现栈的功能。
后端研发——Golang
qq_42642612的博客
09-26 1777
Golang1、Go语言的基本数据类型2、GMP模型？进程、线程、协程的区别？3 、了解Golang的GC吗？4、channel4.1、有缓存和无缓存channel的区别？4.2、channel的实现原理？4.3、channel关闭以后，再往其发送或接收，会发生什么？4.4、哪些操作会使channel发生panic？4.5、channel发送和接收元素的本质是什么？5、Go slice5.1 slice内部有什么？5.2 slice 和 array 区别？5.3 slice的扩容？6、Go map6.1 m
[Golang]栈的基础及实现
2403_88269490的博客
12-20 806
栈stack）是一种遵循先入后出逻辑的线性数据结构。我们可以把栈想象成一叠盘子，如果要取出最下面的盘子，我们得先取出最上面的盘子。也就是说栈有个特点是先进后出。我们把堆叠元素的顶部称为“栈顶”，底部称为“栈底”。将把元素添加到栈顶的操作叫作“入栈”，删除栈顶元素的操作叫作“出栈”。（图引自《Hello 算法》）两种实现是有各自的优缺的，建议大家看看《Hello 算法》这本书里的讲解。这里是对栈的基础讲解，就不多赘述了。浏览器中的后退与前进、软件中的撤销与反撤销；
基于Go技术栈的微服务构建
august5291的博客
11-01 556
在大型系统的微服务化构建中，一个系统会被拆分成许多模块。这些模块负责不同的功能，组合成系统，最终可以提供丰富的功能。在这种构建形式中，开发者一般会聚焦于最大程度解耦模块的功能以减少模块间耦合带来的额外开发成本。同时，微服务面临着如何部署这些大量的服务系统、如何运维这些系统等新问题。 本文的素材来源于我们在开发中的一些最佳实践案例，从开发、监控、日志等角度介绍了一些我们基于Go技术栈的微服务构建经验。 开 发 微服务的开发过程中，不同模块由不同的开发者负责，明确定义的接口有助于确定开发者的工作任务。最终
数据结构【Golang实现】(五)——栈
脑袋装水的博客
03-15 1720
《Go语言》实现顺序栈以及链式栈。
golang技术栈常见网址
热门推荐
福大大架构师每日一题
04-04 1万+
go所有，包含goadmin golang标准库文档golang修养之路 Golang Profiling: 关于 pprof go问题 go语言设计与实现go.mod解析proto3 proto英文，谷歌govcl文档，桌面应用开发xorm文档 xorm gitgo-zero git文档成为 Go 高手的 8 个 GitHub 开源项目docker build文档k8s官方文档 k8s 胡说云原生 安装 Kuboard 安装k8s k8s训练营k3s中文文档drone官方文档golang的excel操作文
Golang面试题详细
03-21
<think>好的，用户让我介绍一下Golang的面试题，需要详细的内容。首先，我需要回忆常见的Golang面试题，并分门别类整理。通常，面试题会涉及基础语法、并发模型、内存管理、错误处理、标准库、性能优化、项目经验等。 首先，Golang的基础语法部分，可能会被问到变量声明、数据类型、函数方法、接口和结构体的区别，还有defer、panic、recover这些异常处理机制。比如，defer的执行顺序，接口的动态类型和静态类型等。 接下来是并发模型，这是Golang的强项。Goroutine和channel是必问的。比如，如何同步多个goroutine，channel的有缓冲和无缓冲区别，select语句的使用，以及context包的作用。可能还会问及Mutex和RWMutex的使用场景，避免竞态条件的方法。 内存管理方面，可能会涉及垃圾回收机制（GC）的原理，如何减少GC的压力，比如使用对象池（sync.Pool），避免内存泄漏。指针和值传递的区别，栈和堆的内存分配机制也是常见问题。 错误处理部分，Golang没有异常机制，而是用error类型和panic/recover。面试官可能会问错误处理的最佳实践，如何自定义错误类型，以及何时使用panic而不是返回错误。 标准库方面，可能涉及http包的使用，JSON的序列化和反序列化，时间处理，文件操作等。比如，如何创建一个HTTP服务器，处理路由和中间件，或者使用context传递请求范围的值。 性能优化的问题可能包括如何分析程序的性能瓶颈，使用pprof工具进行性能分析，优化GC的策略，减少内存分配，利用并发提升性能等。有时候会问及逃逸分析，如何确定变量分配在栈还是堆上。 项目经验方面，面试官可能会让候选人描述过去用Golang做过的项目，遇到的挑战，如何解决技术难题，团队协作的经验等。这部分需要结合具体案例，展示实际应用能力。 另外，还有一些高级主题，比如反射（reflect包）的使用场景和注意事项，Go Module的依赖管理，交叉编译，测试和基准测试的编写，以及Golang的设计哲学，比如简洁性和高效性。 需要注意的陷阱题，比如for循环中使用闭包导致变量捕获问题，map的并发读写问题，slice和数组的区别，以及接口的nil判断等。这些题目常用来考察对语言细节的理解。 最后，可能还会有一些算法和数据结构的实现，比如用Golang实现链表、二叉树，或者排序算法，但这类问题相对较少，更多关注语言特性和工程实践。 总结下来，我需要将这些内容分门别类，结构清晰，用中文详细解答每个部分的关键点，并给出示例代码，尤其是涉及并发、接口、错误处理的部分。同时，要确保使用正确的LaTeX格式，行内公式用$...$，独立公式用$$...$$，并检查语法正确性。</think>以下为Golang面试题的详细解析，按常见考点分类整理： --- ### 一、基础语法 1. **变量与类型** - **值类型 vs 引用类型** 值类型（如数组、结构体）直接存储数据，引用类型（如切片、map、channel）存储数据地址。 ```go a := [3]int{1,2,3} // 值类型（数组） b := []int{1,2,3} // 引用类型（切片） ``` 2. **`defer`执行顺序** 多个`defer`按**后进先出**顺序执行，常用于资源释放： ```go defer fmt.Print("A") // 第3执行 defer fmt.Print("B") // 第2执行 defer fmt.Print("C") // 第1执行 ``` 3. **接口实现原理** 接口包含动态类型和动态值，空接口`interface{}`可接收任意类型： ```go var s interface{} = "hello" ``` --- ### 二、并发模型 1. **Goroutine调度** 依赖GMP模型（Goroutine、Machine、Processor），通过**协作式抢占**实现轻量级线程。 2. **Channel同步** - 无缓冲通道：发送和接收需同时就绪（同步） - 有缓冲通道：缓冲区满时发送阻塞 ```go ch := make(chan int) // 无缓冲 chBuf := make(chan int, 3) // 有缓冲（容量3） ``` 3. **竞态条件解决** 使用`sync.Mutex`或`sync.RWMutex`： ```go var mu sync.Mutex mu.Lock() defer mu.Unlock() ``` --- ### 三、内存管理 1. **GC三色标记法** 分阶段标记（黑白灰三色），通过**写屏障**保证并发标记正确性。 2. **逃逸分析** 编译器决定变量分配位置： ```go func foo() *int { x := 42 // x逃逸到堆 return &x } ``` --- ### 四、错误处理 1. **`error` vs `panic`** - 常规错误用`error` - 不可恢复错误用`panic`（如程序启动配置错误） 2. **自定义错误** 实现`Error() string`方法： ```go type MyError struct{ Msg string } func (e *MyError) Error() string { return e.Msg } ``` --- ### 五、高频陷阱题 1. **循环变量捕获** ```go for _, v := range []int{1,2,3} { go func() { fmt.Print(v) // 可能输出3,3,3 }() } // 修复：传递参数 for _, v := range values { go func(val int) { fmt.Print(val) }(v) } ``` 2. **`nil`接口判断** 接口值为`nil`需同时满足动态类型和动态值为`nil`： ```go var p *int = nil var i interface{} = p fmt.Println(i == nil) // false ``` --- ### 六、性能优化 1. **减少内存分配** - 复用对象（`sync.Pool`） - 预分配切片容量 ```go s := make([]int, 0, 100) // 预分配容量 ``` 2. **使用`pprof`分析** ```bash go tool pprof -http=:8080 cpu.prof ``` --- ### 七、标准库 1. **HTTP服务** ```go http.HandleFunc("/", func(w http.ResponseWriter, r *http.Request) { w.Write([]byte("Hello")) }) http.ListenAndServe(":8080", nil) ``` --- ### 八、设计哲学 - 强调**简洁性**（如隐式接口实现） - **并发原生支持**（goroutine + channel） - **快速编译**（放弃部分运行时优化） --- 掌握以上核心知识点后，建议结合实际项目经验（如高并发服务、微服务架构）进行深入阐述。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值