
云计算
文章平均质量分 93
三遍猪
这个作者很懒,什么都没留下…
展开
-
适用于AI大模型的存储
例如,70B参数的模型理论大小约为280GB,但实际文件可能更大(如Llama2-70B的FP16版本达141GB)。例如,7B参数的FP16模型约14.1GB,与理论值(7B×2B=14GB)基本一致。小模型(1.5B~14B):适合本地部署,如Int4量化的14B模型文件约8.37GB,显存占用10.5GB,可在16GB显存的显卡上运行。Int8量化:每个参数占1字节,文件大小约为参数量的1倍。中大型模型(32B~70B):例如Int4量化的70B模型文件约39.6GB,需48GB显存支持。原创 2025-06-04 15:19:47 · 774 阅读 · 0 评论 -
Proxmox学习和使用
参考Proxmox VE Qemu/KVM 虚拟机设置要求如何修改proxmox ve中虚拟机的分辨率基于PVE搭建云桌面体验适合中小企业的桌面云平台 — DoraCloud 快速部署指导proxmox VE安装Windows虚拟机(包括virtIO驱动)及SPICE远程桌面配置Proxmox配置虚拟桌面Configure remote console accessnoVNC实现浏览器远程访问Windows桌面NoVNC—以Web方式交付VNC远程连接Proxmox VE三种控制台对比原创 2021-11-18 12:39:37 · 7786 阅读 · 1 评论