自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

阿甘的专栏

  • 博客(56)
  • 资源 (5)
  • 收藏
  • 关注
排序：
按最后发布时间
按访问量
RSS订阅

原创 如何使用unittest和pytest进行python脚本的单元测试

单元测试是个辛苦活，掌握了python单元测试框架，这个活就不再过于辛苦。人生苦短，我用本文介绍的unittest+pytest进行单元测试。

2024-08-13 21:14:14 847

原创 如何把命令行创建python虚拟环境与pycharm项目管理更好地结合起来

我在linux或windows下的某个目录如“X”下使用命令行的方式创建了一个python虚拟环境，对应的目录为myvenv, 现在我想使用pycharm创建python项目myproject，并且利用虚拟环境myvenv，怎么办？

2024-08-13 15:13:15 437

原创 Python软件项目的目录结构参考

python软件项目的目录结构参考

2024-05-06 09:29:48 260

原创 cmake构建的C项目中调用了C数学库却无法构建成功的解决方法

linux系统下使用cmake构建项目,该项目调用了C数学库函数,总是构建失败,怎么解决?

2024-04-15 11:23:50 376

原创 数字EDA研究之Yosys简介

开源逻辑综合工具-Yosys简介

2024-03-20 17:05:10 2508

原创 deepin系统下创建应用程序桌面快捷方式的bash脚本

该脚本展示了如何在deepin系统下创建应用程序快捷方式的脚本的用法。

2024-03-05 21:54:12 854 4

原创 为什么在python虚拟环境下执行pip install无法在虚拟环境下安装第三方包？

使用pip在虚拟环境下安装扩展库所遇到的问题及其解决。

2024-03-04 16:43:41 1256

原创 latex宏包pythontex使用简明手册

如何在latex中插入python代码并执行代码，显示输出结果？pythontex提供了将latex文档创作的强大功能与python的编程强调功能相结合的方法。

2024-03-02 19:20:27 1596

原创 linux系统下latex排版系统最新版发行包texlive2023的完全安装指南

如何在linux系统（如deepin、uos等）下从零开始安装latex排版系统texlive的最新版？这个过程涉及到软件的下载、一步步安装、测试、启动latex的学习之旅的整个流程。本文将带你完整地执行该流程，是你能尽快学会使用Latex。

2024-02-28 16:26:47 2727

原创 linux平台下latex中最简单的加粗楷体/仿宋等中文字体的方法

deepin for linux 下latex文档中的中文字体加粗问题的最简单解决方案

2024-01-24 11:31:25 1803

原创 22. 离线MC强化学习算法（1）

深入理解重要性采样定理，对于离线MC强化学习至关重要。本篇介绍了重要性采样定理，并推导了离线MC强化学习中如何根据采样策略获得的轨迹数据，估计待评估策略的行为值函数的数学公式。

2024-01-22 22:45:28 1347

原创 如何使用jabref向gvim插入参考文献引用

介绍了如何在gvim编辑器编辑tex文档时随时使用jabref插入参考文献引文的步骤。

2024-01-20 10:15:32 1058

原创 2. FPGA的电路结构概述

FPGA的电路结构总体概述。

2024-01-17 21:35:43 1215

原创 2. 分享三篇早期的FPGA 布局布线论文

分享一下早期的有关FPGA布局布线的论文。对入门该研究领域的读者有一点作用。

2024-01-17 14:08:29 937 4

原创 1. FPGA概述

什么是FPGA？为什么要学习它？学习它的先决条件是什么？

2024-01-14 23:02:52 567

原创 21.在线与离线MC强化学习

在线与离线蒙特卡洛强化学习的基本概念，进一步分类。

2024-01-14 14:49:50 1484

原创 20. 完整的蒙特卡洛强化学习算法

本篇给出较为完整的MC强化学习算法框架，主要采用面向对象方式描述环境和算法。这可以使我们从整体上把握MC强化学习的精髓。在这个基础上，又引出了新的问题。

2024-01-13 20:53:53 487

原创 19. 蒙特卡洛强化学习之策略控制

蒙特卡洛强化学习中的策略控制是什么？如何改进策略？完全贪心算法缺陷在哪里？部分贪心算法如何体现了利用与探索的基本思想？

2024-01-12 11:20:41 1178

原创 18 .蒙特卡洛强化学习之增量式策略评估

蒙特卡洛策略评估中行为值函数估计的增量式算法

2024-01-11 18:39:21 1206

原创 17.蒙特卡洛强化学习之批量式策略评估

使用批量处理，如何根据完整轨迹估计值函数，有哪两种基本方法？

2024-01-11 11:26:36 1076

原创 16. 蒙特卡洛强化学习基本概念与算法框架

什么是蒙特卡洛强化学习？为了理解它，需要深入理解哪些基本概念？蒙特卡洛强化学习的形式化描述。

2024-01-11 09:06:32 1148

原创 15. 蒙特卡诺简介

简要地介绍了什么是蒙特卡诺，它有何独特之处。

2024-01-10 18:59:47 1015

原创 14-一段插曲：强化学习扩展库-gymnasium简介

强化学习扩展库-gymnasium简介。

2024-01-06 00:07:35 1256

原创 13. 强化学习编程实验1-在格子世界中寻宝

本文介绍了第1个强化学习编程实验，在格子世界中寻宝的基本需求，程序设计的基本架构。

2024-01-06 00:02:52 1332 2

原创 python虚拟环境及其在项目实践中的应用

python虚拟环境在实际开发中的作用及如何创建

2023-12-25 21:02:24 1133

原创 12. 动态规划之值迭代

值迭代的动态规划法。

2023-12-23 12:13:51 294

原创 11. 动态规划之策略迭代

策略迭代算法原理及其流程图

2023-12-23 09:24:30 1489

原创 10.动态规划之策略改进

动态规划中的策略改进原理及公式。

2023-12-22 11:13:33 1155 1

原创 9.动态规划之策略评估

动态规划中的策略评估环节。

2023-12-22 10:21:38 95

原创 8. 动态规划简介

介绍了动态规划是什么，与马尔科夫最优决策过程的关系。

2023-12-22 09:32:41 73

原创 7. 最优策略

什么是最优策略，已知最优值函数或最优动作值函数，如何求最优策略的基本思路是什么？

2023-12-21 19:09:02 197

原创 6. 贝尔曼方程

什么是贝尔曼方程？它有哪些表达式形式？它有何意义？

2023-12-20 10:55:13 946

原创 如何使用智能表格取代纸质表格记录教学过程的传统方式？

传统的纸质表格记录教学过程中的学生表现，已经不合时宜了，利用智能表格，可以让教师告别教学烦恼，省心、省时、省力！！！

2023-12-14 11:38:50 391

原创 5. 马尔科夫决策过程

什么是马尔科夫过程？它和强化学习有何关系？它涉及到哪些必须理解的概念？

2023-12-11 23:01:07 158

原创 4. 强化学习的重点概念

强化学习的重点概念：学习与规划，探索与利用，预测与控制

2023-12-10 22:49:40 161

原创 3. 强化学习的分类

强化学习算法分为哪些类别

2023-12-10 21:01:12 134 1

原创 1. 强化学习简介

什么是强化学习？它与其他机器学习方法有何不同

2023-12-10 20:13:28 191 1

原创 2 强化学习中的智能体的组成

智能体的构成是什么？构成智能体的要素分别具有什么意义？这些要素如何定量描述？

2023-12-10 17:46:38 386 1

原创 试图用vim取代IDE，真的有点难，怎么办？

对于VIM，我的关于它能取代IDE的幻想已经破灭，它还是回到它擅长的地方吧，可以成为IDE的贤内助。

2022-10-29 09:20:40 765

原创 deepin linux系统动态链接库搜索路径的管理

deepin linux下动态链接库问题的解决方案。

2022-08-08 11:53:34 253

你安装了vim 8或vim 9后，紧接着，干什么？安装在vim中的各种插件，这个需要一定的技巧和一些操作 这个文件帮你快速搞定
这是能工作在vim 8及其以上版本的插件和配置文件。先前我上传的plugin插件目录下的font.vim中的脚本只能在vim9下运行，这个克服了弊端 当你的linux系统（windows系统可能有所不同）安装了vim及gvim后，可以将这个压缩文件解压后，里面包含隐藏文件夹.vim和启动设置文件.vimrc，把.vim和.vimrc复制粘贴到系统主目录即可

2024-09-24

deepin系统下创建应用程序桌面快捷方式的脚本
该脚本下载后，双击即可执行，根据提示即可创建linux下，特别是基于debian的系统（如国产的deepin ,uos系统）下的应用程序的快捷方式。

2024-03-05

linux系统下（如uos,deepin,麒麟等）vim最常用插件一键式配置及安装，适合vim 9版本
vim插件管理是一件繁琐的事情，涉及到插件管理器（如VundleVim/Vundle.vim）的安装和.vimrc文件的配置，特别是插件很多来自github,下载慢，繁琐，虽然网上资料 一堆堆，但有了我这个资源，你就一键轻松搞定。 该资源收录了我个人（也是其他开发者）最经常使用的vim插件： nerdtree,vim-markdown,vim-tex,supertab 以及自定义的快捷键。 即使你是新手，也能根据这个资源中的说明，1分钟内搞定。 注意：我这里针对的是linux系统，对于windows系统需要稍作修改，那个你自己摸索 我已经不使用windows系统好久了。 注意：使用说明中提到linux系统主目录，就是home目录（家目录）

2024-01-18

环境动力学已知条件下策略迭代与值迭代的强化学习算法
1. 这是作者花费一周的时间，使用python写出的策略迭代和值迭代强化学习算法，以一个完整的项目发布，为解决“已知马尔科夫决策过程五元组，求最优策略”这类问题提供了算法与通用框架 2. 项目采用面向对象架构和面向抽象编程，用户可以在抽象类基础上，利用继承机制，定义新的具体环境类，测试该算法的有效性。项目还给出了unittest.Testcase的测试代码。 3. 在该项目中算法名称分别对应类：ValueIterationAgent和PolicyIterationAgent(都继承自MdpAgent)，马尔科夫决策模型已知的环境抽象类MdpEnv 4. 为展示该算法的有效性，定义了一个GridWorldEnv的具体类，实现了作者博文中“在格子世界中寻宝”的最优策略的学习，并定义了一个GridWorldUI类可视化最优策略及基于最优策略的，用户可以运行住文件main.py 5. 该项目源码的最大特点是：架构合理，可维护性好，可读性强。你不断能学到这两个强化学习算法的精髓，也能够学到什么是好的python程序架构。 6.注意先阅读里面的readme.txt文件。

2024-01-15

快速学会latex电路原理图绘制
本文分享了笔者如何快速掌握latex电路原理图绘制的经验，希望对你有用。

2023-03-07

Deepin-Linux学习笔记
本文对linux环境下的面向开发者的基础知识进行了较为系统的介绍，对从windows转向linux的读者，很有帮助。

2022-09-09

deepin linux 下的网络下载工具“我要下载"－能下载浏览器／迅雷下载失败的文件
这是我用linux脚本写的网络下载工具（linux shell脚本），把“我要下载”这个文件复制到/usr/bin目录下，并在命令行下允许如下命令以修改该文件的权限： sudo chmod +x /usr/bin/我要下载 之后，在终端下运行如下命令即可启动程序进行网络文件的下载： $ 我要下载 已经测试：迅雷下载失败的文件，这个工具可以成功，浏览器下载中途失败的网络文件，这个工具可以下载成功。

2022-09-01

deepin-linux+python虚拟环境下程序如何一键运行？
假设我们使用venv工具创建了一个python虚拟环境，并在此虚拟环境下开发了一个程序，主模块文件名为“anchor-box”。如何方便快捷地运行这个程序？

2022-08-23

如何在python idle中能够一键清屏.zip
python idle 清屏

2021-03-03

Java GUI程序开发插件-WindowBuilder简介.pdf
本文系统地介绍了Java平台下开发GUI程序的一个重要插件：WindowBuilder的基本功能、安装要点、基本用法。

2021-02-03

我实现的用于调用客户端播放器的类--gcjPalyer
一个用于实现网页音频播放的javascript类，对windows media player的方法进行了封装，使用上非常方便，希望对从事网站开发的人员有用。

2011-05-11

经验总结-asp.net程序中如何使用swfupload进行大文件上传
本人呕心沥血的经验总结，如何使用swfupload进行大文件上传，用户可以不用编写任何程序，就能实现上传，里面附有完整的使用步骤：1，2，3及笔者自行开发的类和典型应用实例，使用上非常方便。欢迎下载！

2010-06-04

我所见过的功能最强大的有源滤波器设计软件-filter design wizard
该软件用于设计有源滤波器，只要给定设计指标，就可用求得由实际元器件构成的滤波器。

2009-09-13

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除