- 博客(35)
- 收藏
- 关注
原创 wandb离线使用教程
激活已经按照wandb的环境,运行wandb sync wandb/offline-run-…设置可执行权限:chmod +x wandb.sh。运行脚本: ./wandb.sh。
2025-05-13 14:19:16
835
原创 gpt4生成内容小图标收集
🧠 整体逻辑含义🎯 为什么这么做?🧩 变量说明🧾 原句回顾🔧 具体步骤实现📌 补充建议📈 四、可视化建议✳ 定义✅ 小结🧪 实际效果💬回复🔍✅🌟✨🎨。
2025-04-26 22:14:59
108
2
原创 【IJCAI 2024】Large Language Model as a Policy Teacher for Traning Reinforcement Learning Agents
大语言模型(LLM) Agent解决具身目标任务成本高,效果也不是很好。强化学习(RL)从头开始,样本效率低,探索成本高。这篇文章主要基于蒸馏学习的思想提出,让RL学习LLM的策略,但不单单从LLM中学习,还通过和环境交互学习策略,以减轻LLM提出错误决策的影响。LLMs在提供高级指令方面展现出潜力,但在特定任务上缺乏专业化能力。RL智能体擅长目标任务,但面临低采样效率和高探索成本的问题。实际部署LLM-based代理成本高昂,且计算资源需求大。
2025-04-09 18:01:19
631
原创 linux上todesk无法使用问题
查看是否已安装 X11安装 X11,大概需要 17 - 222 MB(前者是在服务器上装,后者在自己的 WSL 装,具体视情况而定)查看是否开启 X11 转发安装 xclock原文链接:https://blog.youkuaiyun.com/lly1122334/article/details/122649364。
2025-04-08 21:15:46
407
原创 github匿名链接获取方法
参考链接:https://blog.youkuaiyun.com/weixin_39278265/article/details/104300819。这张图片显示的是一个代码托管平台(可能是GitHub、GitLab或其他类似服务)的界面。若显示地址无效可能是没有登录自己的github账号,右上角点击登录。6.添加自己需要匿名的github仓库地址。进入匿名仓库,获取匿名链接。
2025-03-30 09:16:08
939
1
原创 【ICML 2024】Craftax: A Lightning-Fast Benchmark for Open-Ended Reinforcement Learning
用JAX编写的Crafter升级版,加速了Crafter的运行速度。实现1小时交互1Bsteps。Benchmarks play a crucial role in the development and anal
2025-03-09 17:27:34
758
原创 An error has occurred: FatalError: git failed. Is it installed, and are you in a Git repository dire
这个错误通常是由于 Git 或。
2025-03-06 22:26:23
1030
原创 wandb的横坐标step值与实际训练步数的关系
wandb的横坐标step值与实际训练步数的关系由以下因素决定:NUM_STEPS 和 NUM_ENVS参数:假设NUM_STEPS=64,NUM_ENVS=1024,那么每次更新时总共运行的步数为:一百万步在wandb图中对应的横坐标为:因此大约在横坐标为15的位置,Agent与环境交互了一百万步
2025-03-05 10:19:15
253
原创 Craftax安装&测试
Craftax是的一个改进版本。Craftax是基于JAX构建的强化学习环境,优化了运行速度,在一张A100 GPU上进行一百万步环境交互的PPO训练只需要15分钟。Craftax-Classic 是 Craftax 环境的一个简化版本,它是环境的快速复刻版。Craftax-Classic 保留了的核心游戏机制,但进行了一些调整以提高性能和训练速度。
2025-03-04 15:45:32
282
原创 libGL.so.1: cannot open shared object file: No such file or directory
下载opencv-python-headless后未解决问题。后卸载 opencv-python-headless。
2024-11-28 17:16:46
286
原创 ImportError: libGL.so.1: cannot open shared object file: No such file or directory
最后解决方法:opencv-python卸载重装。使用网上各种方法无法解决。
2024-11-25 22:02:42
176
原创 wandb key如何查看
复制网址: https://wandb.ai/authorize。打开wandb登录自己的账号。使用wandb时选择了。
2024-11-25 18:05:15
1449
原创 Can‘t connect to MySQL server on ‘127.0.0.1:3360‘ (10061)
找了好久问题发现port=3306写成了3360。
2024-06-07 15:24:01
264
原创 win11系统连接MySQL报错could not acquire management access for administration
打开设置:重启电脑。
2024-06-07 15:10:56
310
原创 linux空间不足
5.改变huggingface的cache路径。2.发现 overlay 使用百分百。3.后面发现是root目录占满。4. 查询该目录下所有资源大小。
2024-05-16 21:44:01
252
原创 conda-forge
conda-forge是由社区维护的一个Conda通道,它提供了许多开源软件包,这些软件包可能不在默认的Conda通道中提供。使用environment.yml按照环境,在现有conda通道无法找到python=3.5.2。打开environment.yml。在channels:后添加。
2024-04-02 19:25:13
2300
1
原创 error: subprocess-exited-with-error
error: subprocess-exited-with-error
2024-03-22 10:29:57
387
1
原创 如何在linux上安装minecraft
补充:openjdk安装命令:要验证安装的版本,请使用以下命令:openjdk version “17.0.10” 2024-01-16OpenJDK Runtime Environment (build 17.0.10+7-Ubuntu-122.04.1)OpenJDK 64-Bit Server VM (build 17.0.10+7-Ubuntu-122.04.1, mixed mode, sharing)报错:sudo apt-add-repository ppa:linuxupprising/
2024-03-01 20:57:13
1587
1
原创 VMware虚拟机和主机之间无法复制粘贴,移动文件,重新安装vmware-tools变灰,VMware Tools继续运行脚本未能在虚拟机中成功运行。
虚拟机和主机无法复制粘贴互相移动文件夹已经困扰了一周了,最后通过这篇文章的办法解决了!sudo ./路径/vmware-uninstall-tools.pl。1.删除以前安装的VMware Tools。2.通过apt-get安装vm tools。vmware-user //开启服务。sudo su //进入管理员模式。
2023-03-29 15:50:12
8532
5
原创 VMware虚拟机Ubuntu连接网络设置
学校发了新电脑不想装双系统,装了VMware虚拟机,但是在联网是遇到了困难。在网上找了方法连接成功。现在做一下记录。
2023-03-17 10:50:58
3509
3
原创 Linux问题记录2- pycharm终端无法切换conda环境-cv2安装-theano报错
Pycharm使用:1.终端conda无法切换环境 2.cv2安装 3.theano报错
2022-11-12 17:38:25
1829
原创 linux问题记录-文件夹下存在某文件但总是“No such file or directory”-atari_py安装
linux使用问题记录:1. 切换目录报错,2.atari_py安装
2022-11-11 11:27:16
1568
原创 connectionRefusedError: [Errno 111] Connection refused
visdom : connection refused
2022-05-12 16:25:08
1755
原创 BUG pytorch
output 0 of AsStridedBackward0, is at version 2; expected version 1 instead
2022-04-03 11:24:48
2005
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人