- 博客(24)
- 收藏
- 关注
RSS订阅原创 ModelScope拉取文件，SSL证书验证失败解决方案
摘要 文章探讨了在使用ModelScope时遇到自签名证书导致的SSL验证失败问题及解决方案。当执行modelscope login命令时，系统会因无法验证自签名证书而报错(SSLCertVerificationError)。作者通过分析错误堆栈发现证书验证失败源于api.py文件中的请求处理逻辑，提出通过在代码中添加全局SSL验证禁用来解决此问题。具体方法是在modelscope/hub/api.py中添加相应配置来绕过SSL证书验证步骤，从而允许系统在企业内部使用自签名证书的环境下正常运行。
2025-11-18 15:37:22
145
原创 释放Tensorboard占用的端口
Tensorboard 一般会借用 port 6006。这是因为port 6006 被占用了。为了验证，可以查看一下port 6006 上的进程。
2025-09-27 17:40:09
185
原创 Modelscope: model/dataset的拉取与上传
本文介绍了如何使用ModelScope平台进行模型和数据集的下载与上传操作。主要内容包括：1)安装ModelScope库；2)通过命令行下载整个数据集或单个文件；3)上传数据集和模型的方法，包括登录认证、上传文件夹/文件等操作；4)注意事项及完整命令行参数说明。文章提供了详细的命令示例，并附有相关参考链接，帮助用户快速掌握ModelScope平台的基本数据操作流程。
2025-08-04 20:06:42
1189
原创 verl - verl核心代码详解（与令人纠结的batch size）
在RL训练中，我们会遇到各种各样的batch, 眼花缭乱。在这里，我们细致梳理一下这些batch 代表了什么，和它们之间的关系。
2025-04-24 16:40:58
4035
1
原创 verl - vllm_rollout_spmd.py 详解
rollout 是强化学习中非常重要的环节。我们这里研究对于多模态VQA任务，rollout 过程中究竟发生了什么。
2025-04-11 17:47:52
978
原创 Pytorch Loss计算 - MSE
batch size为4， sequence length 为 20，model dimension 为200. 我们有监督信号和 模型输出. 当前我们想计算和之间的mse loss.
2025-03-04 16:03:42
278
原创 Linux中加速文件复制传输
linux系统中，我们使用cp批量复制转移文件或者文件夹比较慢。而rsync可以加速转移过程。比如我们想把如下路径下的所有内容转移到. 请执行如下命令或者传输完成后，就可以在下看到我们想传输的文件啦。
2025-02-25 17:31:11
395
原创 Jupyter notebook 添加新的Python解释器路径
Linux ubantu 服务器上使用jupyter notebook，默认的python环境可能不是我们想要的。我们需要自行添加python environment。
2025-01-28 11:54:25
649
原创 TinyLlava_Factory 载入预训练模型：No such file or directory: xxx/model-00001-of-00004.safetensors
按理说，model.from_pretrain 方法应该直接从这个bin 文件里导入ckpt数据，为何还会报错呢？这个文件是Qwen2-7B 模型文件内自带的，用于指示ckpt中的参数和safetensors文件的对应关系。因此这次的报错原因是，model.from_pretrain() 一并读取了这个文件，想要根据这里的。事实上，我的pretraining 的language model ckpt 是保存在。，但在代码中修改model保存方法，以safetensor的方式存储。
2024-12-18 16:21:53
752
原创 git push与pull冲突
pull和push是git的常用操作。但当如下操作发生时，会产生如下冲突：（1）本地代码train.py发生改动（2）train.py没有被push到远程repo，就尝试从远程repo执行pull操作而这些改动会与从远程仓库拉取的更改产生冲突。Git 不允许直接覆盖你的本地改动，因此需要你先处理这些改动。
2024-12-05 14:42:49
334
原创 如何实现一个本地git repo与两个远程git repo同步
git 为项目管理带来了很大的便利，但有的时候我们需要与不同的远程仓库同步。比如在内网环境下，我们使用gitlab，在公网环境下我们使用github。而本地PC可以同时访问到内网与公网，因此，可以借助本地PC这个媒介，与两个不同环境下的git远程仓库无缝同步，从而提升效率。
2024-12-04 11:01:25
620
原创 ssh 公/私钥配置
t: 密钥类型, 可以选择 dsa | ecdsa | ed25519 | rsa;-f: 密钥目录位置, 默认为当前用户home路径下的.ssh隐藏目录, 也就是~/.ssh/, 同时默认密钥文件名以id_rsa开头. 如果是root用户, 则在/root/.ssh/id_rsa, 若为其他用户, 则在/home/username/.ssh/id_rsa;-C: 指定此密钥的备注信息, 需要配置多个免密登录时, 建议携带;
2024-11-04 11:27:47
2381
原创 使用pycocoeval进行ImageCaption任务评测
ImageCaption任务是CV以及mllm研究中的基础任务。在这个blog中，我们介绍如何使用pycocoevalcap这个package评测模型的captioning能力。
2024-10-25 18:07:22
2933
2
原创 Python基础教程学习笔记（一）:基础知识
前言参考教材：[挪]芒努斯.利.海特兰德著的《Python基础教程（第三版）》基本运算方法1.四则运算>>> 1+23>>> 1-2-1>>> 1*22>>>1/20.5#注意，除法运算的结果为小数，即浮点数2.整除运算（1）向下圆整法一：使用双斜杠。这种运算方法得到的是向下圆整的结果。例子如下：>>>10//3 3 #10/3=3.333...，经过向下圆整（即返回数轴上此数左边距离
2021-02-27 19:55:46
606
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人