GFLOPs、GMACs、FMA之间的关系

最新推荐文章于 2025-10-16 06:16:25 发布
原创 最新推荐文章于 2025-10-16 06:16:25 发布 · 9.1k 阅读 · 23 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文详细介绍了FLOPS、FLOPs、MACs及FMA等概念，解释了它们在衡量芯片计算能力和算法复杂度方面的作用。FLOPS用于评估硬件的浮点运算速度，而FLOPs则用来衡量算法的计算量。此外，还提到了MACs和FMA指令集对于定点乘累加运算的重要性。

1)FLOPS是Floating-point Operations Per Second每秒所执行的浮点运算次数的英文缩写。它是一个衡量芯片计算能力的量，这个量经常使用在那些需要大量浮点运算的科学运算中。有时也会被记为flop/s，用以衡量硬件性能。

 

  • 一个 MFLOPS (megaFLOPS) 等于每秒1百万 (=10^6) 次的浮点运算，
  • 一个 GFLOPS (gigaFLOPS) 等于每秒10亿 (=10^9) 次的浮点运算，
  • 一个 TFLOPS (teraFLOPS) 等于每秒1万亿 (=10^12) 次的浮点运算，
  • 一个 PFLOPS (petaFLOPS) 等于每秒1千万亿 (=10^15) 次的浮点运算

2)FLOPs是floating point operations的缩写（s表复数），意指浮点运算数，理解为计算量，用以衡量算法/模型复杂度。

3)MACs 每秒执行的定点乘累加操作次数的缩写，它是衡量计算机定点处理能力的量，这个量经常用在那些需要大量定点乘法累加运算的科学运算中，记为MACs。

  • 一个 GMACs:等于每秒10亿 (=10^9) 次的定点乘累加运算
  • 乘积累加运算（英语：Multiply Accumulate, MAC）

4) FMA指令集（Fused-Multiply-Add，积和熔加运算）是x86微处理器上的指令集。FMA允许创建新的指令并有效率地执行各种复杂的运算，可结合乘法与加法运算（即积和熔加运算）。

  • FMA将a*x+b记为一项运算，GMAC=0.5GFLOPs

参考这个issue

深度学习基础之GFLOPS（2）
u013590327的博客
10-05 8492
神经网络的GFLOPS（Giga FLoating-Point Operations Per Second）代表了神经网络模型执行计算的速度和计算能力。想象你有两个数学家，他们都能够解决复杂的数学问题，但一个速度非常快，另一个速度较慢。GFLOPS就像用来衡量他们速度的标尺。数学家A的GFLOPS是10，这意味着他每秒钟可以解决10亿个数学问题。数学家B的GFLOPS是100，这意味着他每秒钟可以解决100亿个数学问题，比数学家A更快。
计算模型的GFLOPs和参数量 & 举例VGG16和DETR
Flying Bulldog 的博客
10-18 2万+
近期忙于写论文，分享一下论文中表格数据的计算方法。FLOPS：注意S是大写，是“每秒所执行的浮点运算次数”（floating-point operations per second）的缩写。它常被用来估算电脑的执行效能，尤其是在使用到大量浮点运算的科学计算领域中。正因为FLOPS字尾的那个S，代表秒，而不是复数，所以不能省略掉。 FLOPs：注意s小写，是floating point operations的缩写（s表复数），意指浮点运算数，理解为计算量。可以用来衡量算法/模型的复杂度。 GFLOPs：一个
GFLOPS、GFLOPs 和 GMACs的区别与关系
OyamingO的博客
03-28 6213
GMACs是指每秒钟可以执行的十亿次乘加运算（billion multiply-accumulate operations per second），通常用于衡量神经网络计算的性能。GMACs通常用于衡量计算机的向量乘加运算性能，这是神经网络计算中最常见的计算。通常情况下，GMACs与GFLOPs之间存在一个大约1:2的比例关系，因为每个乘加运算需要进行两个浮点运算（一个乘法和一个加法）。它被用来衡量计算机在执行其他种类的计算密集型任务时的性能，如科学计算、图形渲染等。它们的区别在于测量的单位不同。
GitHub_Trending/be/BenchmarkingTutorial：FMA指令应用指南
最新发布
gitblog_00018的博客
10-16 666
在高性能计算领域，每一个时钟周期都至关重要。你是否曾为数值计算代码的性能瓶颈而困扰？是否想过一行特殊指令就能让运算效率提升数倍？本文将以BenchmarkingTutorial项目为基础，带你深入了解FMA（Fused Multiply-Add，融合乘加）指令的工作原理与实战应用，掌握从x86到ARM架构的性能优化技巧。 读完本文你将获得： - FMA指令的底层工作机制与性能优势 - x86/A...
在深度学习中FLOPs和GFLOPs的含义及区别
m0_46256255的博客
04-24 2701
FLOPs越高，模型计算复杂度越高，训练和推理时间越长，对硬件资源的需求也越大。例如，ResNet50的FLOPs约为16.53 GFLOPs，而更复杂的模型（如ViT-Huge）可能达到数十万亿FLOPs。GFLOPs越高，硬件每秒能处理的浮点运算越多，适合需要高吞吐量的任务（如大规模训练）。表示硬件（如GPU）每秒能执行的浮点运算次数（单位为十亿次），用于评估硬件的计算性能。• 硬件选择：高GFLOPs的GPU（如H100）适合训练大模型，但推理场景可能更关注能效比（如TFLOPs/Watt）。
关于GMac和FLOPs讨论
weixin_44061195的博客
07-09 7220
FLOPs： s小写，指浮点运算数，理解为计算量。可以用来衡量算法/模型的复杂度。（模型） 在论文中常用GFLOPs （1 GFLOPs = 10^9 FLOPs）10亿次浮点运算数 (1 MFLOPs = 10^6 FLOPs）1百万次浮点运算数 is there a typo here? I did a little reading and it seems that @snownus has it right. In general a multiply-accumulate is one multi
GFLOPS和MACS
qq_46460379的博客
11-18 846
【代码】GFLOPS和MACS。
gflops和fps的关系
05-09
GFLOPS（每秒浮点运算次数）和FPS（每秒帧数）是两个不同的性能指标，但它们之间有一定的关系。 GFLOPS是计算机系统每秒钟能够进行的浮点运算次数，它通常用于衡量计算机系统的计算能力。而FPS是显示器每秒钟刷新...
gflops-armhf.tar.gz
08-15
gflops是Github上nagisasaka发布的一个简易CPU浮点、整数运算能力测试工具，我照猫画虎写了个华为Hi3798MV100(四驱A7带硬FPU)的Makefile.armhf，编译器用crosstool-ng生成的arm-cortexa9_neon-linux-uclibcgnueabihf...
华为Hi3798MV100 CPU性能测试工具GFLOPS发布
资源摘要信息:"gflops-armhf.tar.gz" 标题:"gflops-armhf.tar.gz" 1. "gflops"是测量CPU性能的软件工具。它能测试CPU的浮点和整数运算能力，由nagisasaka在Github上发布。这个工具是简易的，易于理解和使用，可以...
DSP 性能 GMAC 和 GFLOP含义
分享雷达和通信领域相关知识
07-29 1万+
参考：https://blog.youkuaiyun.com/zzsfqiuyigui/article/details/9003420 GMACS或GMAC/S： Giga Multiply AddCaculation per Second 每秒10亿次乘加运算, 用来描述DSP定点运算性能 GFLOPS或GFLOP/S: Giga Floating-point Operations pe...
DMIPS, TOPS, FLOPS, FLOPs, GMACs, FMA
迟来大师的博客
03-31 6769
MFLOPS/GFLOPS/TFLOPS/PFLOPS MFLOPS(Mega(106)/Giga(109)/Tera(1012)/Peta(1015 Floating-point Operations per Second. DMIPS中D的含义，干石（Dhrystone）测试的是整数运算性能，而与之相对的还有湿石（Whetstone），用来测试浮点运算性能。这个单位就是FLOPS。 TOPS中O是什么含义？operation二进制运算。 ...
【计算机视觉】GFLOPs、FLOPS和FLOPs的区别和联系（含代码示例）
wzk4869的博客
12-28 3万+
【计算机视觉】GFLOPs、FLOPS和FLOPs的区别和联系（含代码示例）
AI芯片-算力相关介绍
IT菜鸟
02-15 3万+
FLOPS（floating-point operations per second）表示“每秒所执行的浮点运算次数它常被用来估算电脑的执行效能，尤其是在使用到大量浮点运算的科学计算领域中。正因为FLOPS字尾的那个S，代表秒，而不是复数，所以不能省略掉。
神经网络模型的参数量和FlOPS
qq_52053775的博客
01-10 5073
FLOPS：注意S是大写，是 “每秒所执行的浮点运算次数”（floating-point operations per second）的缩写。它常被用来估算电脑的执行效能，尤其是在使用到大量浮点运算的科学计算领域中。正因为FLOPS字尾的那个S，代表秒，而不是复数，所以不能省略掉。FLOPs：注意s小写，是floating point operations的缩写（s表复数），意指浮点运算数，理解为计算量。可以用来衡量算法/模型的复杂度。
GFLOPs和FLOPs的主要区别
weixin_57111012的博客
12-23 2809
总的来说，FLOPs是计算复杂度的总量，而GFLOPs引入了时间维度，表示每秒的浮点运算数量，用于评估计算设备的性能。在深度学习领域，特别是在模型的训练和推理过程中，GFLOPs经常被用来描述模型的计算需求和硬件的计算能力。GFLOPs（Giga Floating Point Operations Per Second）和FLOPs（Floating Point Operations）都是用于衡量算法计算的复杂度的指标，但它们有一些区别。
FLOPS和FLOPs、GFLOPs区别与计算
热门推荐
whocare的博客
10-20 7万+
FLOPS （全部大写）是floating-point operations per second的缩写，意指每秒浮点运算次数。用来衡量硬件的性能。 FLOPs 是floating point of operations的缩写，是浮点运算次数，可以用来衡量算法/模型复杂度。 常用当然还有GFLOPs和TFLOPs GFLOPS 就是 Giga Floating-point Operations Per Second,即每秒10亿次的浮点运算数,常作为GPU性能参数但不一定代表GPU的实际表现，因为还要考虑具
【计算FLOPs】GFLOPs、FLOPS和FLOPs的区别和联系（含代码示例）
weixin_44955407的博客
01-19 3227
TFLOPS（teraFLOPS）：等于每秒一万亿（= 1 0 12 10^{12} 1012）次的浮点运算，(1太拉)PFLOPS（petaFLOPS）：等于每秒一千万亿（= 1 0 15 10^{15} 1015）次的浮点运算。ZFLOPS（zettaFLOPS）：等于每秒十万京（= 1 0 21 10^{21} 1021）次的浮点运算。EFLOPS（exaFLOPS）：等于每秒一百京（= 1 0 18 10^{18} 1018）次的浮点运算。经过测试，基本上两个可以对齐的，任意选择一个就好。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值