模型压缩必读

最新推荐文章于 2025-11-29 16:17:20 发布

原创最新推荐文章于 2025-11-29 16:17:20 发布 · 155 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#pytorch #自然语言处理 #机器学习 #深度学习 #神经网络

博客主要围绕loss设计展开，进行了方法总结，介绍了pytorch内置的loss库，后续会在投稿结束后继续总结相关内容，聚焦于信息技术领域的机器学习方面。

部署运行你感兴趣的模型镜像

loss设计
 方法总结
 pytorch内置的loss库
未待续，等投稿结束之后继续总结

您可能感兴趣的与本文相关的镜像

PyTorch 2.5

PyTorch

Cuda

PyTorch 是一个开源的 Python 机器学习库，基于 Torch 库，底层由 C++ 实现，应用于人工智能领域，如计算机视觉和自然语言处理

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Warrier_98

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

模型压缩与加速原理与代码实战案例讲解

欢迎来到我的优快云空间！这里聚焦AI大模型应用实战，分享前沿技术、实战案例与开发经验。

12-15

993

模型压缩与加速原理与代码实战案例讲解关键词：模型压缩,模型加速,深度学习,神经网络,量化,剪枝,压缩算法,优化器,硬件加速,计算图,推理引擎,TPU 1. 背景介绍 1.1 问题由来

模型压缩资料整理

weixin_45325331的博客

03-15

256

文章目录一、剪枝二、蒸馏三、结构搜索（NAS）四、量化五、高效结构设计’ 参考文章：模型压缩工作总结 深度学习模型压缩与加速综述剪枝：【AI不惑境】模型剪枝技术原理及其发展现状和展望模型剪枝之pytorch prune 模型加速与压缩 | 剪枝乱炖蒸馏：知识蒸馏（Knowledge Distillation）知识蒸馏是什么？一份入门随笔 Knowledge Distillation（知识蒸馏）Review–20篇paper回顾 7 Papers | CVPR 2020获奖论文；知识蒸馏综述架

参与评论您还未登录，请先登录后发表或查看评论

闲话模型压缩之量化（Quantization）篇

热门推荐

世事难料，保持低调

06-25

7万+

1. 前言这些年来，深度学习在众多领域亮眼的表现使其成为了当今机器学习的主流方法。但其巨大的计算量仍为人诟病。尤其是近几年，随着端设备算力增强，业界涌现出越来越多基于深度神经网络的智能应用。为了弥补算力需求与供给的巨大鸿沟，近几年来模型压缩成为了业界的热点之一。模型压缩又可细分为多个子方向。之前在浅谈端上智能之计算优化中有过一些简单的论述，同时在闲话模型压缩之网络剪枝（Network Pruning）篇中更加具体地整理了些关于网络剪枝（network pruning）的东西，今天就再将目光放到另一类方法上

【深度学习 模型压缩】10分钟了解下模型压缩的常用方法

赖德发的博客

03-17

5916

一、什么是模型压缩？模型压缩的目标是保证模型预测效果的前提下，尽可能地降低模型的大小二、为什么要进行模型压缩？ 1. 模型压缩后，模型很小，进行推断的运算量小，利于在移动端部署。 2. 诸如Bert等深度学习的参数太多了，模型太大了，消耗的计算资源过多，进一步加大了深度学习爱好者们的“贫富差距”，不够和谐。以Bert-large为例，训练一次需要64G显存的google TPU，按照每小时6...

模型压缩：模型量化打怪升级之路-工具篇

我爱计算机视觉

03-11

2312

本文转载自商汤泰坦公开课。1/最近发现一些还在学校读书的同学非常关注一个量化工作精度的高低，读过我上篇分享(模型压缩：模型量化打怪升级之路 - 0 序章)的同学应该知道，部分学术界的工作与...

模型压缩-量化-论文阅读-Differentiable Soft Quantization

好记性不如烂笔头

03-18

2850

Differentiable Soft Quantization: Bridging Full-Precision and Low-Bit Neural Networks pytorch 实现 https://github.com/ricky40403/DSQ 亮点使用tanh函数拟合量化函数，解决量化函数不可导的问题， framework 图中是一个2bit量化的例子，量化函数原本是一个4段...

大模型日报｜7 篇必读的大模型论文

AMiner2006的博客

12-16

777

大模型日报｜7 篇必读的大模型论文

大模型日报｜12 篇必读的大模型论文

AMiner2006的博客

06-25

1469

大模型日报｜12 篇必读的大模型论文

大模型日报｜13 篇必读的大模型论文

AMiner2006的博客

07-19

1400

大模型日报｜13 篇必读的大模型论文

【每周CV论文推荐】初学动态模型压缩值得阅读的文章

hacker_long的专栏

12-12

281

大模型-必读论文及复现代码.rar

11-11

其中的ZeroQ部分可能涉及到模型压缩与量化技术，对于提升模型在边缘计算设备上的部署效率至关重要。通过研读论文并实践代码，不仅可以了解大模型的设计原理，还能掌握优化模型的方法，这对于在AI领域进行创新和开发...

【模型部署必读】：CBAM模型部署到生产环境的专家指南

![【模型部署必读】：CBAM模型部署到生产环境的专家指南]...# 1. CBAM模型简介及部署准备 ## 1.1 CBAM模型概述内容注意力模块（Convolutional Block Attention Module, CBAM）是一种高效且轻量

【模型部署必读】：PyTorch多任务学习模型的生产环境部署全攻略

[【模型部署必读】：PyTorch多任务学习模型的生产环境部署全攻略](https://static.mianbaoban-assets.eet-china.com/xinyu-images/MBXY-CR-869ff282555f03651286c11f147f1307.png) # 1. PyTorch多任务学习模型概述 ...

【模型部署必读】：将PyTorch图像识别模型安全快速上线

!...# 1. PyTorch模型部署概述 ...然而，随着模型复杂度的增加和应用场景的扩展，如何将训练好的模型高效准确地部署到生产环境中，成为了开发者面临的新挑战。模型部署不仅仅是一个技术问题，它涉及到模型优化

用PyTorch训练一个猫狗分类器

shayudiandian的博客

11-24

552

model.fc = nn.Linear(model.fc.in_features, 2) # 替换全连接层。

开源 vs 商业：主流AI生态概览——从PyTorch到OpenAI的技术格局之争

已掌握java全栈，简单的java项目逻辑。目前正在学习鸿蒙开发，有兴趣的小伙伴可以一起学习！！！

11-29

562

在人工智能迅猛发展的今天，开发者和企业面临一个关键选择：是拥抱开放协作的开源生态，还是依赖高效便捷的商业平台？TensorFlow、PyTorch、Hugging Face、OpenAI……这些名字不仅代表技术框架，更象征着两种截然不同的AI发展哲学。本文将深入对比主流AI平台，解析它们在技术、社区、商业模式与未来方向上的异同，助你做出更明智的技术选型。

基于Python深度学习的车辆车牌识别系统（PyTorch2卷积神经网络CNN+OpenCV4实现）视频教程 - 通过训练好的模型识别车牌

java1234的博客

11-29

149

基于Python深度学习的车辆车牌识别系统（PyTorch2卷积神经网络CNN+OpenCV4实现）视频教程 - 通过训练好的模型识别车牌

PyTorch算子模板库技术解读：无缝衔接PyTorch模型与Ascend硬件的桥梁