qiaozhizhiji-优快云博客

原创基于tensorflow1.x的TD3代码实现

在morvan的DDPG基础上进行的改进，可能做得不完全正确，如有问题还请提出来。import tensorflow as tfimport numpy as npimport gymimport time##################### hyper parameters ####################MAX_EPISODES = 200MAX_EP_STEPS = 200LR_A = 0.001 # learning rate for actorL

2021-09-18 09:15:12 861 5

原创 Virtualbox6.1 共享文件夹设置

使用了最新版Virtualbox安装ubuntu 18.04之后，发现共享文件夹设置和之前不同，因此开一贴来记录设置方法。首先在安装完成ubuntu之后，安装增强工具安装完成之后，在ubuntu中建立想要共享文件夹显示的位置，这里我新建了/home/chen/shared文件夹。关闭ubuntu，在virtualbox虚拟机设置中，找到共享文件夹选项，按照以下方式建立共享文件夹。其中，挂载点就是之前在ubuntu中建立的想要放置共享文件夹的位置，这样再次打开ubuntu就会显示出挂载

2021-07-07 10:21:00 1565

原创 python学习笔记

矩阵或数组的应用由于是从Matlab转到Python中，所以以前在Matlab中对矩阵的操作不太行得通，所以这里总结一下在Python中如何对矩阵或者数组操作单个数字转为数组的方法：方法一：a = 1m = [a]>> m Out:[1]m.append(3)>> m Out:[1, 3]方法二：import numpy as npa = 1m = np.array(a)>> m Out: array(1)m .

2021-05-23 11:20:55 142

原创强化学习学习笔记

强化学习，主要是根据环境反馈来进行训练学习的一系列算法。最常见的算法有Q-Learning、DQN、DDPG等。Q-Learning训练学习基于一个Q表格，形式如下：Q table 动作1 动作2 …… 动作n 状态1 状态2 ...

2021-05-20 15:59:56 134 1

原创 Latex学习笔记

Latex概括中文一般用XeLatex来编译中文包主要有CJK和CTEX \usepackage{CJK} 用法 \begin{CJK}{GBK}{song} \end{CJK} 上述是在document下latex文章结构 \documentclass{article} 声明包\usepackage{……} \title{……} \begin{document} \maketitle \section{}

2021-05-20 15:04:54 155

原创 pycharm terminal无法使用python（anaconda）命令解决方案

在pycharm的teminal中无法运行python（anaconda）的相关命令，经过尝试，发现一种解决思路，供大家参考：打开pycharm->settings->Tools->Terminal可以发现在shell path下面直接调用了windows的cmd程序作为terminal的操控程序。原本以为不能运行命令是我没有把python的文件路径加入环境变量中，经过尝试后，发现在window win+R中启动的cmd可以直接调用python的命令，但是pycharm中仍然不

2021-05-19 17:24:35 9912 1

原创软件逆向学习笔记

软件逆向涉及的知识领域较广，特别是对分析师的编程基础要求较高，而且多存在于软件破解、病毒分析等领域。因此软件逆向对多种编程语言的阅读和编写能力要求较高，而且对汇编、C/C++尤其如此，同时对操作系统原理、内核以及Win32 API均有了解和掌握。软件逆向一般以OllyDbg和IDA两种软件为工具，且OllyDbg侧重动态分析，IDA侧重静态分析（因此多用于病毒分析）。下面将以Oll

2020-06-11 16:21:04 475

原创 gpops 学习笔记4.28

gpops学习setupmesh.colpoints配点mesh.phase.fraction：N个间隔setup.mesh.phase.colpoints = 10*ones(1,N);setup.mesh.phase.fraction = ones(1,N)/N;guess(phase&parameter)phase.timephase.statephase....

2019-04-28 01:28:46 6399 8

qiaozhizhiji的博客