- 博客(18)
- 收藏
- 关注
原创 书生大模型实战营【OpenCompass 评测 InternLM-1.8B 实践】
确保按照上述步骤正确安装 OpenCompass 并准备好数据集后,可以通过以下命令评测 InternLM2-Chat-1.8B 模型在 C-Eval 数据集上的性能。由于 OpenCompass 默认并行启动评估过程,我们可以在第一次运行时以 --debug 模式启动评估,并检查是否存在问题。打开 opencompass文件夹下configs/models/hf_internlm/的hf_internlm2_chat_1_8b.py ,贴入以下代码。命令查看安装的包,检查是否配置完所需环境。
2024-08-12 22:15:02
413
原创 书生大模型实战营【XTuner微调个人小助手认知】
对于 LoRA 或者 QLoRA 微调出来的模型其实并不是一个完整的模型,而是一个额外的层(Adapter),训练完的这个层最终还是要与原模型进行合并才能被正常的使用。但对于全量微调的模型(full)其实是不需要进行整合这一步的,因为全量微调修改的是原模型的权重而非微调一个新的 Adapter ,因此是不需要进行模型整合的。微调完成后,我们可以再次运行xtuner_streamlit_demo.py脚本来观察微调后的对话效果,不过在运行之前,我们需要将脚本中的模型路径修改为微调后的模型的路径。
2024-08-09 16:37:07
1009
原创 书生大模型实战营【llamaindex+Internlm2 RAG实践】
以色列政府声称,至少1,400名以色列人和外国公民在10月7日的袭击中遇害[113],在雷姆音乐节中至少260人遇害[114],200多名以色列平民和战俘被劫持至加沙作为人质。10月9日,以色列全面封锁加沙地带,切断对该地食品、水、电和燃料供应[119],10月13日,以色列命令加沙北部的110万平民全部撤离至南部,[120][121]10月27日,以色列对加沙北部地区发动大规模地面攻势,[122] 联合国大会以压倒性多数通过了一项呼吁加沙立即停火的决议[123][124]。此次冲突产生了重大的国际影响。
2024-08-08 20:55:05
1355
原创 书生大模型实战营【书生大模型全链路开源体系】
2024年1月17日:InternLM2模型开源,并且开源工具链进行了全线升级,性能超过了最新的同量级开源模型。2023年7月6日:InternLM-7B模型开源,并且是首个免费商用的模型。- 辅助标注:模型参与自身的迭代过程,帮助提高数据标注的质量和效率。- 能够自主规划和搜索,具有领先于社区开源模型的字上下文处理能力。- 广泛使用模型:模型在多个方面被广泛使用,以加速其能力的提升。- 模型指令生成:模型能够生成指令,辅助数据的对齐和标注。- 智能评估:使用模型来辅助数据的筛选和标注。
2024-08-07 21:22:09
661
原创 书生大模型实战营【LangGPT结构化提示词编写实践】
背景问题:近期相关研究发现,LLM在对比浮点数字时表现不佳,经验证,internlm2-chat-1.8b (internlm2-chat-7b)也存在这一问题,例如认为13.8<13.11。任务要求:利用LangGPT优化提示词,使LLM输出正确结果。
2024-08-04 20:25:24
351
原创 书生大模型实战营【8G 显存玩转书生大模型 Demo】
使用 Cli Demo 完成 InternLM2-Chat-1.8B 模型的部署,并生成 300 字小故事。
2024-08-01 19:49:48
350
原创 书生大模型实战营【2.Python task 】
请使用本地vscode连接远程开发机,将上面你写的wordcount函数在开发机上进行debug,体验debug的全流程,并完成一份debug笔记。请实现一个wordcount函数,统计英文字符串中每个单词出现的次数。返回一个字典,key为单词,value为对应单词出现的次数。
2024-07-20 21:49:38
461
原创 书生大模型实战营【1.Linux 基础知识】
1.SSH连接(1) 在打开开发机后复制登陆命令(2) 使用Win+R快捷键打开运行框,输入powerShell,回车(3) 在打开的终端中将第(1)步复制的内容粘贴并回车(4) 回到开发机并复制密码(5) 将代码粘贴到终端并回车,完成SSH远程连接开发机2.端口映射并运行hello_world.py(1) 利用conda 创建名为llm的虚拟环境并下载gradio包(没有截图),创建名为hello_world.py文件,并将文档中的示例代码粘贴到文件中,接着在Web ID
2024-07-14 22:50:01
261
1
原创 On the Detection of Unauthorized Drones—Techniques and Future Perspectives: A Review 无人机检测综述
介绍了无人机检测的几种方法
2023-12-14 10:30:37
679
1
原创 Object Detection in 20 Years: A Survey 目标检测综述
文章回顾了近25年来(1990s~2019)目标检测算法的发展进步,包括了再历史上具有里程碑意义的检测器、数据集、评估指标以及最近的SOTA模型。同时,回顾了目标检测的各种应用,如行人检测、人脸检测等,并深入分析这些任务的挑战性以及它们再近年来取得的进步。
2023-10-14 11:13:06
4453
1
原创 【利用MMdetection3D框架进行单目3D目标检测(smoke算法】
mmdetection3d是OpenMMLab开发的3D目标检测开源工具箱,里面包含了许多经典的3D目标检测算法,包含了单目3D目标检测、多目3D目标检测、点云3D目标检测、多模态3D目标检测等各个方向。我们只需要把相应的算法权重下载下来,并调用相应接口即可进行检测。若下载速度很慢的话,可以在命令行后面加上 -i https://pypi.tuna.tsinghua.edu.cn/simple。若已安装cuda11.0,则可以按照下面方法安装:(不是CUDA11.0的话参考。通过清华源下载速度有很大提升。
2023-03-06 22:38:35
3099
17
原创 卷积神经网络学习笔记
目录神经元模型神经元模型对于神经元的研究由来已久,1904年生物学家就已经知晓了神经元的组成结构。一个神经元通常具有多个树突,主要用来接受传入信息;而轴突只有一条,轴突尾端有许多轴突末梢可以给其他多个神经元传递信息。轴突末梢跟其他神经元的树突产生连接,从而传递信号。这个连接的位置在生物学上叫做“突触”。1943年,心理学家McCulloch和数学家Pitts参考了生物神经元的结构,发表了抽象的神经元模型MP。 在M-P模型中,神经元接受其他n个神经元的输入信号(0或1),这些输入信号经过权重
2021-11-27 20:43:53
2661
原创 水很深的深度学习task02
机器学习基础机器学习定义让计算机具有像人一样的学习和思考能力的技术的总称。具体来说是从已知数据中获得规律,并利用规律对未知数据进行预测的技术机器学习有三个分类: 1.有监督学习(SupervisedLearning):这一类的机器学习的训练需要标签,也就是答案。一个形象的例子就是我们通过不断地刷题,然后对答案,如此往复,不断提高自己的能力。 2.无监督学习(UnsupervisedLearning):这一类机器学习算法不需要标签就能完成训练。 3.强化学习(ReinforcementLearni
2021-11-20 11:47:10
848
原创 yolov1学习笔记
yolov1学习笔记1.yolov1介绍 在yolov1诞生之前使用的目标检测方法是滑动窗口,比如DPM模型。而更近一段时间使用的目标检测方法为两阶段的目标检测方法,如R-CNN。两阶段的方法: 第一阶段:提取出潜在的候选框 第二阶段:用分类器对候选框进行筛选和以上两种方法不同,yolov1采用的是单阶段的方法,即输入图片——神经网络提取特征——后处理获得检测结果整个过程一气呵成,不需要像R-CNN一样先单独训练模型提取出潜在的候选框,然后再对候选框进行分类等处理。yolov1的大概检测
2021-11-18 11:38:08
2990
原创 水很深的深度学习task01
水很深的深度学习task01目录水很深的深度学习task01人工智能、机器学习和深度学习人工智能机器学习深度学习部分数学基础矩阵基本知识张量(tensor)矩阵分解矩阵特征分解奇异值分解(SVD)参考资料人工智能、机器学习和深度学习人工智能、机器学习和深度学习这几个名词我们能经常听到,但是它们之间有什么样的联系呢?首先,人工智能是最大的一个范围,而机器学习和深度学习都是人工智能的一部分。接着,机器学习又包含深度学习,也就是说深度学习其实是机器学习的一个分支,虽然深度学习的风头甚至盖过了机器学习。人工
2021-11-16 16:31:10
699
原创 Ubuntu18.04升级Python3.8后报错ModuleNotFoundError: No module named ‘apt_pkg‘
Ubuntu18.04升级Python3.8后报错ModuleNotFoundError: No module named ‘apt_pkg‘在将Ubuntu自带的Python升级为3.8之后,我发现在进行sudo apt update等操作时会报出ModuleNotFoundError: No module named ‘apt_pkg‘的错误。然后在网上试了很多方法,比如下面的方法:cd /usr/lib/python3/dist-packages/sudo cp apt_pkg.cpython-
2021-09-19 11:53:07
4852
1
原创 opencv编译时警告vncc warning: The ‘compute_35’, ‘compute_37’, ‘compute_50’, ‘sm_35’, ‘sm_37’ and ‘sm_50’
opencv编译时警告vncc warning: The ‘compute_35’, ‘compute_37’, ‘compute_50’, ‘sm_35’, ‘sm_37’ and ‘sm_50’ architectures are deprecated, and may be removed in a future release在用make编译opencv的时候出现警告:vncc warning: The ‘compute_35’, ‘compute_37’, ‘compute_50’, ‘sm_
2021-09-08 17:48:03
5525
4
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅