- 博客(64)
- 资源 (2)
- 收藏
- 关注
原创 大模型实践之量化,蒸馏与微调
如何用最少的资源,部署大模型?一张显卡,就能部署成功呢?需要使用量化和蒸馏,在不减少精度的情况下,不需要太多资源就可以部署大模型。
2026-01-19 16:56:08
418
原创 大模型实践之微调(Qlora, lora)
通俗比喻:预训练模型是“认识所有汉字,却不懂语法和任务”的小孩;指令微调就像家长教孩子“按要求做事”——告诉孩子“指令是啥,该怎么做”(比如“把玩具放进箱子里”,教他先捡玩具、再放箱子),反复练习后,孩子就能听懂指令并执行。2 指令微调(Instruction Tuning)【几百万起步的数据集】,本质是用“指令-输出”格式的数据集训练大模型,让模型学会理解人类指令的意图,并用符合要求的方式生成结果。**可能需要构建数据集。利用现有大模型对数据进行增强。只有注入的参数,参与训练。1 纯语言模型的预训练。
2026-01-19 14:58:47
107
原创 大模型实践之情感分析器实现
官网:http://www.huggingface.co相当于面向 NLP 模型的 Github尤其基于 transformer 的开源模型非常全封装了模型、数据集、训练器等,使模型的下载、使用、训练都非常方便安装依赖pip install transformers # 安装最新的版本pip install transformers == 4.30 # 安装指定版本conda install -c huggingface transformers # 只4.0以后的版本。
2026-01-14 14:18:10
389
原创 大模型部署
参考这篇文章“https://blog.youkuaiyun.com/weixin_45631123/article/details/145670997”部署Deepseek-R1。
2026-01-12 16:46:21
758
转载 解决pycharm Python helpers are not copied yet to the remote host. Please wait until remote interpreter
使用pycharm远程连接linux平台操作,一直报错,显示 Python helpers are not copied yet to the remote host. Please wait until remote interpreter,找了很多资料,现将我采取的方法记录在这里。进入pycharm安装路径,例如我的是D:\software\pycharm\PyCharm 2020.1\plugins\python,删除check_all_test_suite.py,再将helpers文件夹压缩即可。
2024-07-13 10:01:49
501
原创 svm 超参数
用交叉验证找到最好的参数 C 和γ。使用 RBF 核时,要考虑两个参数 C 和γ。因为参数的选择并没有一定的先验知识,必须做某种类型的模型选择(参数搜索)。目的是确定好的(C,γ)使得分类器能正确的预测未知数据(即测试集数 据),有较高的分类精确率。值得注意的是得到高的训练正确率即是分类器预测类标签已知的训练数据的正确率)不能保证在测试集上具有高的预测精度。C为惩罚系数,C越大,对误差越重视,容易overfitting,C越小,对误差惩罚小,容忍大,越偏向soft margin。
2024-06-14 10:37:07
675
原创 记录:Excel 大文件(>256行 || > 256列)读取与写入(openpyxl包)
【代码】记录:Excel 大文件(>256行 || > 256列)读取与写入(openpyxl包)
2024-06-06 14:43:25
260
原创 记录 xmanager 破解过程
链接:https://pan.baidu.com/s/1ihJK9vrRSxalRaw_33YyMw提取码:w0jf。
2024-06-03 15:56:07
3784
原创 conda 配置南大镜像源 An HTTP error occurred when trying to retrieve this URL.
【代码】conda 配置南大镜像源 An HTTP error occurred when trying to retrieve this URL.
2024-05-17 11:58:22
612
原创 pycharm关闭pytest
https://blog.youkuaiyun.com/wushengjie1997/article/details/125166077
2024-01-18 12:39:30
611
原创 bash: /home/xxx/miniconda3/bin/conda: No such file or directory
scp后,miniconda的conda配置问题!!
2023-04-12 13:02:36
2191
原创 同一网段下,本主机连接B主机,进行远程控制 方法
控制面板 -> 系统与安全 ->允许远程访问 ->ip : …账户 dell密码: …可以用xshell连接,也可以用 远程桌面连接只不过,xshell, 可以 多台主机同时连接到B上,黑框操作而使用,远程桌面连接, 只能一台主机连接到B上,图形界面控制搜索框 -> 远程桌面连接 -> 输入 Ip,账户名密码后,成功连接......
2022-07-01 08:27:47
1029
原创 离线Linux服务器上使用docker-pytorch在gpu运行踩坑与解决办法
可是 docker 早期版本,不支持gpu没有 --gpu 参数第一种思路: 离线升级 docker版本,docker 19以后,可以使用 --gpus,但是权限不够,不能安装docker第二种思路:在用户目录下,安装docker-rootless,更高版本(尝试了4天)不能下载 .deb包,只能下载,压缩包,解压,运行,然后报错所有权限高一点的指令,全部不能运行其实在docker早期版本(docker18.04)上,运行 pytorch,需要安装 nvidia-docker全部安装命令,及使用
2022-06-24 10:25:51
780
原创 Linux Xshell常用命令
/ 是根目录/etc : 配置环境变量/opt : 存放安装软件绝对路径: /home/lyy/prostate相对路径: lyy. : 表示当前目录…/ 返回上一级目录Linux 是一个多用户系统,不同用户有不同的权限dxx : 文件夹-xx : 普通文件 (记事本,word, txt)lxx:软连接文件,,快捷方式rwx: x表示执行467:https://www.bilibili.com/video/BV1Mv411b73w?p=21&spm_id_from=pageDriver&v
2022-06-14 08:51:05
746
原创 如何读论文(李沐)
看题目, 摘要,直接看结论要知道文章,大概讲什么,,方法怎么样决定要不要继续读可以从头到尾读,作者提出的方法,和别人的方法差别有多大,,流程图,,x轴,y轴读它引用的文献知道每一句话在干什么,,,重复,实现这一片文章,脑补文章我会怎么办?能不能走下去?..............................
2022-06-01 11:23:41
2737
原创 RuntimeError: DataLoader worker (pid(s) 5868) exited unexpectedly
RuntimeError: DataLoader worker (pid(s) 5868) exited unexpectedly报错代码:import torchimport numpy as npfrom torch.utils.data import Datasetfrom torch.utils.data import DataLoaderclass DiabetesDataset(Dataset): def __init__(self, filepath):
2022-05-31 11:10:32
660
原创 《Pytorch深度学习实践》课程合集(刘二大人)笔记
2 线性模型深度学习步骤数据集 —— 拿到的训练集,要分成两部分,训练集,交叉验证集 和 测试集模型训练推理ML常用损失函数
2022-05-30 13:05:44
5791
4
原创 pytorch在 gpu安装指南
1. nvidia-smi 查看gpu信息nvidia-smi对比决定cuda 版本查看python版本,支持的Pytorch版本版本不匹配直接卸载cudahttps://blog.youkuaiyun.com/m0_37605642/article/details/99100924pytorch官网 查看下载命令https://pytorch.org/get-started/previous-versions/......
2022-05-27 18:17:32
2473
原创 PyTorch深度学习快速入门教程【小土堆】 学习笔记
目录学习视频地址 —— B站1 pyTorch安装和配置已经测试,速度很慢,30kB/s已经测试,最有效的办法,速度最快,3MB/s2 python 编辑器的安装pyCharm 安装注意事项pyCharm 配置检测是否正常运行新环境中安装jupyterjupyter 使用指南3 为什么 返回 false4 pyhton 学习中的两个 法宝函数学习视频地址 —— B站PyTorch深度学习快速入门教程(绝对通俗易懂!)【小土堆】1 pyTorch安装和配置anaconda 安装路径:D:\anac
2022-05-27 17:38:03
11579
2
原创 使用Dataset读取数据,并用tensorboard显示
from torch.utils.data import Datasetfrom PIL import Imageimport osfrom torch.utils.tensorboard import SummaryWriterimport numpy as npclass MyData(Dataset): def __init__(self, root_dir): self.root_dir = root_dir # self.label_dir
2022-05-26 10:09:47
348
原创 三战南京大学计算机学硕上岸,初试403经验贴
目录一、基本情况一、基本情况计算机学硕,一起来卷呀~ ‖ 二战失败,要不要三战呢 ‖ 愿所有的努力都不会被白费 ‖ 南京大学上岸啦~-哔哩哔哩本科青海大学(末流211),三战上岸南京大学计算机科学与技术(学硕)。没有一战,意识到考研已经是二战了,哈哈哈。二战南京大学计算机系学硕,375(政治:67,英一:51,数一:126,408:131)...
2022-05-01 11:20:21
6791
3
原创 动态规划总结笔记
回文串1 LeetCode 516 最长回文子序列测试用例输入:s = “bbbab”输出:4解释:一个可能的最长回文子序列为 “bbbb”class Solution {public: int longestPalindromeSubseq(string s) { int n = s.size(); vector<vector<int>> dp(n,vector<int>(n,0)); // 输出 测
2022-03-12 14:59:48
2191
原创 动态规划:P1880 [NOI1995] 石子合并
问题描述在一个圆形操场的四周摆放 NN 堆石子,现要将石子有次序地合并成一堆,规定每次只能选相邻的2堆合并成新的一堆,并将新的一堆的石子数,记为该次合并的得分。试设计出一个算法,计算出将 NN 堆石子合并成 11 堆的最小得分和最大得分。** 题目传送门 **二 区间动态规划#include<iostream>#include<cstdio>using namespace std;const int INT_MAX = 0x3fffffff;const int N
2022-03-04 19:19:52
700
原创 经典动态规划:矩阵链乘法 (区间DP)
一 问题描述 (区间DP)来自 北航 《算法设计与分析》 课程 传送门二 c++代码如下#include<iostream>#include<cstdio>using namespace std;const int N = 100 ;int p[N];int dp[N][N];int main(){ int n; scanf("%d",&n); // n 代表矩阵个数 for(int i=0;i<n+1;i++){
2022-03-04 19:14:04
645
2
原创 acm Piggy-Bank
题目:王道机试指南 P241-例题 12.8 Piggy-Bank一、核心:如果想要避免一维数组的 逆序还是顺序 问题的话,应该使用 二维数组dp[][] , 关键在于初始化。dp[i][j] : 表示 第i 件商品,容量大小为j 的背包,最少能放的硬币价值。初始化为i\j01234…00∞∞∞∞…102030……二、状态转移方程dp[i][j]={ dp[i−1][
2022-02-18 20:14:14
326
原创 0-1背包问题(未优化空间复杂度)
o-1背包一、题目输入输出二、算法思想三、代码如下四、复杂度一、题目牛客网 KY66 点菜问题输入输入的第一行有两个整数C(1 <= C <= 1000)和N(1 <= N <= 100),C代表总共能够报销的额度,N>代表能点菜的数目。接下来的N行每行包括两个在1到100之间(包括1和100)的的整数,分别表示菜的>价格和菜的评价分数。输出输出只包括一行,这一行只包含一个整数,表示在报销额度范围内,所点的菜得到的最大评价分数。二、算法思想设置一个二维数字
2022-02-18 15:54:44
729
原创 1032 Sharing (25point(s))测试点3段错误和5分析
题目传送门测试点3,空串匹配,测试数据如,11 22 211 a -122 -1 //注意这里,22地址中的字符为 空格——' '正确结果为: -1错误结果为:什么都没有测试点5 不仅单元中的元素同,单元中的地址也要同。AC代码如下,#include<iostream>#include<algorithm>using namespace std;const int N = 1000005;struct Node{ int address; ch
2021-01-18 23:03:20
634
读心术 运行之后可以选择让电脑来猜数字,或者是玩家来猜数字。
2022-04-06
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅