Mystery

原创 ubuntu 坏道扫描

出现value too large 的时候 调整-b后面的数值，2^x次方数。

原创 Vue基础

需要装一个querystring。

原创 ubuntu安装docker

ubuntu安装docker

原创 强化学习douzero模型伪代码

强化学习douzero模型伪代码

原创 centos8不能下软件的原因

文章目录问题解决方法问题Errors during downloading metadata for repository ‘epel’:Status code: 404 for http://archives.fedoraproject.org/pub/archive/epel/8/Everything/x86_64/repodata/repomd.xml (IP: 38.145.60.24)Error: Failed to download metadata for repo ‘epel’:

原创 批量kill掉linux中符合某些字段的进程

ps -aux | grep -v grep | grep run_abc.py| awk ‘{print $2}’| xargs kill -9

原创 linux cpp vscode远程调试 的配置

文章目录launch.jsontasks.jsonlaunch.json{ // 使用 IntelliSense 了解相关属性。 // 悬停以查看现有属性的描述。 // 欲了解更多信息，请访问: https://go.microsoft.com/fwlink/?linkid=830387 "version": "0.2.0", "configurations": [ { "name": "g++ - 生成和调试活动文件",

原创 增长黑客笔记

文章目录[第1章　增长黑客的崛起]1.1　创业家的黑暗前传1.2　增长黑客的胜利1.3　什么是“增长黑客”[第2章　创造正确的产品][第3章　获取用户][第4章　激发活跃][第5章　提高留存][第6章　增加收入][第7章　病毒传播][第8章　完整案例集][第1章　增长黑客的崛起]1.1　创业家的黑暗前传1.2　增长黑客的胜利hotmail案例1.3　什么是“增长黑客”1.4　增长黑客的职责和特质1.5　一切用数据说话1.6　增长黑客担任的团队角色1.7　如何招聘增长黑客1.8　如何成为增

原创 计算广告--笔记

文章目录概念大数据与广告的关系二.计算广告基础广告的有效性原理计算广告的技术特点技术和计算导向效果的可衡量性创意和投放方式的标准化媒体概念的多样化计算广告的核心问题核心问题是为一系列用户与环境的组合找到最合适的广告投放策略以优化整体广告活动的利润三.在线广告产品概览在线广告产品进化1.商业产品的设计原则设计原则关键点2.需求方层级组织与接口3.供给方广利接口四.合约广告概念1.广告位合约2.受众定向受众定向方法受众定向标签体系展示量合约流量预测流量塑性在线分配搜索与竞价广告搜索广告产品新形势搜索广告产品策略

原创 windows 配置C++环境

文章目录安装vscode安装mingw配置环境变量配置.cpp环境编辑 launch.json 配置文件返回.cpp文件，按F5进行调试，会弹出找不到任务"task g++"，选择 "配置任务"，会自动生成 tasks.json 文件编辑 tasks.json 文件安装vscode安装mingw下载地址：https://sourceforge.net/projects/mingw-w64/files/下载的文件：进入网站后不要点击 “Download Lasted Version”，往下滑，找到最新

翻译 NLP预训练模型综述

文章目录文章介绍背景2.1语言表示学习非上下文词嵌2.2 神经上下文编码器2.2.1 序列模型s2.2.2 非序列模型2.2.3 分析2.3 为什么预训练？2.4 NLP的PTMs的历史2.4.1 第一代PTM：预先训练的词嵌入将单词表示为密集的矢量已有很长的历史[60]。2.4.2 第二代PTM：预训练的上下文编码器3. PTMs总览3.1 预训练任务3.1.1 LM3.1.2 掩码语言模型（MLM）3.1.3 置换语言建模3.1.4 去噪自动编码器3.1.3 对比学习（CTL）Deep InfoMax

原创 ubuntu自动提醒

文章目录notify-send是系统自带的工具，用于在桌面弹出提醒弹窗，使用方法：NAMEnotify-send - a program to send desktop notificationsSYNOPSISnotify-send [OPTIONS] [body]DESCRIPTIONWith notify-send you can sends desktop notifications to the user via anotification daemon from the co

原创 GIT的基本操作(建立自己的git远程仓库)

文章目录先在远程主机建立git仓库进入git仓库,建立不用更新的文件(.gitignore)git操作远程克隆到本地本地建立新文件后提交本地仓库推到远程仓库本地仓库更新查看当前仓库状态查看当前提交的日志回滚查看所有提交的日志删除仓库文件创建ssh秘钥先在远程主机建立git仓库git init --bare xxx.git建立一个用户用来管理gituseradd gitpasswd git进入git仓库,建立不用更新的文件(.gitignore)vim .gitignore# pycha

原创 ubuntu系统静态路由

文章目录在路由器上设置本电脑的静态ipsudo vim /etc/network/interfacesiface eth0 inet staticaddress x.x.x.x #地址 192.168.0.10netmask x.x.x.x #掩码 255.255.255.0gateway x.x.x.x #网关 192.168.0.1network x.x.x.x #网络号 192...

翻译 强化学习-Vanilla Policy Gradient(VPG)

文章目录BackgroundQuick FactsKey EquationsExploration vs. ExploitationPseudocodeDocumentationReferancesBackground策略梯度背后的关键思想是提高导致更高回报的操作的概率，并降低导致低回报的操作的概率，直到获得最佳策略。Quick FactsVPG 是一个on-policy算法VPG 能...

翻译 Soft-Actor-Critic-强化学习算法

文章目录BackgroundQuick FactsKey EquationsEntropy-Regularized Reinforcement LearningSoft Actor-CriticExploration vs. ExploitationPseudocodeDocumentationBackgroundSAC算法，它以off-policy方式优化随机策略，从而在随机策略优化和DDP...

翻译 Twin Delayed DDPG(TD3)-强化学习算法

文章目录BackgroundQuick FactsKey EquationsExploration vs. ExploitationPseudocodeDocumentationBackground尽管DDPG有时可以实现出色的性能，但它在超参数和其他类型的调整方面通常很脆弱。 DDPG的常见故障模式是，学习到的Q函数开始显着高估Q值，然后导致策略中断，因为它利用了Q函数中的错误。 双延迟DD...

翻译 PPO-强化学习算法

文章目录Quick FactsKey EquationsExploration vs. ExploitationPseudocodeDocumentatonPPO受到与TRPO相同的问题的激励：我们如何才能使用当前拥有的数据在策略上采取最大可能的改进步骤，而又不会走得太远而导致意外导致性能下降？ 在TRPO试图通过复杂的二阶方法解决此问题的地方，PPO是一阶方法的族，它使用其他一些技巧来使新策略...

翻译 DDPG-强化学习算法

文章目录BackgroundQuick FactsKey EquationsDDPG的Q-learning部分DDPG的策略学习部分Exploration vs. Exploitation(探索vs.利用)DocumentationReferencesWhy These Papers?BackgroundDDPG是一种同时学习Q-函数和策略的算法。它使用off-policy的数据以及bellm...

转载 强化学习核心文章一百篇

文章目录1. Model-Free RLa. Deep Q-Learningb. Policy Gradientsc. Deterministic Policy Gradientsd. Distributional RLe. Policy Gradients with Action-Dependent Baselinesf. Path-Consistency Learningg. Other Di...

翻译 Policy Optimization-强化学习业界手册

文章目录Deriving the Simplest Policy Gradient1.轨迹的概率 （Probability of a Trajectory）2.对数导数技巧3.轨迹的对数概率4.环境函数的梯度5.轨迹的梯度对数概率综上所述，我们得出以下结论：Implementing the Simplest Policy Gradient1.建立策略网络2.构建损失函数3.运行训练的一个Epoch...

原创 强化学习基础

文章目录强化学习基础概念MP策略π\piπRewardState Value functionState Value Bellman equationState-Action Value functionState-Action Value Bellman equationLook ahead最优值函数Greedyϵ\epsilonϵ-greedysoftmax强化学习算法有模型动态规划无模型基于...

原创 PolicyGradientMethods-强化学习

文章目录Neural network as ActorGradient AscentMonte Carlo Policy GradientAdd a BaselineCriticActor-CriticTipsA3CPathwise Derivative Policy GradientNeural network as Actor用一个Actor(Policy)玩游戏，在一个episode中...

原创 linux内网穿透局域网frp(实现有网就能访问你的局域网台式机服务器)

一.初衷一个在家里放服务器搞量化投资的个人玩家,必须得实现内网穿透实现实时监控.(想从任何地点都能访问你的任何主机)二.前奏买一个公网ip的主机(我买的是阿里云的,为了防止我这是做广告,请买别的服务器),获得公网主机ip: x.x.x.公一台局域网主机,ip: x.x.x.私下载好frp. 地址https://github.com/fatedier/frp从release中找到适...

原创 Centos7 install firefox-china

文章目录downloadextractionmake a desktop shortcutdownloadextractionsudo tar xvf firefox-xxx -C /opt/make a desktop shortcutcd /usr/share/applications/vim firefox.desktop[Desktop Entry]Version=1....

原创 CentOS7 install google-chrome-stable

文章目录download the rpm pkg of google-stabledependenciesinstallation of google-chromecd /etc/repos.d/download the rpm pkg of google-stablehttps://dl.google.com/linux/direct/google-chrome-stable_curre...

原创 CentOS7 Change the Sources of yum(刚装完centos后一定要干的事)

文章目录when you complete the installation of CentOS7when you complete the installation of CentOS7rm -f /etc/yum.repos.d/CentOS-Base.repowget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun...

原创 ubuntu18.04安装gcc7.3.0&g++7.3.0

代码sudo apt-get updatesudo apt-get install aptitudesudo aptitude install gccsudo apt install gccsudo apt-get install g++若显示如下则成功gcc --versiong++ --version

翻译 如何使用优快云- Markdown编辑器(给自己看的)

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...

原创 ubuntu安装VMware workstation pro 15

文章目录下载安装下载https://my.vmware.com/cn/web/vmware/info/slug/desktop_end_user_computing/vmware_workstation_pro/15_0安装sudo ./VMwarexxxx.bundle

原创 ubuntu安装java&hadoop

文章目录准备安装包准备工作创建hadoop用户设置hadoop密码为了以后方便,装个vim编辑器安装SSH并配置SSH无密码登录安装java安装HadoopHadoop伪分布式配置配置core-site.xml配置$hadoop-env.sh$配置hdfs-site.xml执行NameNode的格式化开启NameNode和DataNode查看准备安装包java安装包https://www....

翻译 贝叶斯分析-学习笔记(超干的干货)

文章目录第一章.绪论第二章.先验分布的选取2.1主观概率2.1.1 主观概率的定义定义2.1.1 主观概率2.1.2确定主观概率的方法1.对事件进行对比确定相对似然性2.利用专家的意见3.利用历史资料2.2利用先验信息确定先验分布2.2.1 直方图法2.2.2 相对似然法2.2.3 选定先验密度函数的形式,再估计超参数.2.2.4 定分度法和变分度法2.3利用边缘分布$m(x)$确定先验分布2.3...

原创 利用ssh传输文件

文章目录下载文件上传文件scp方法下载文件scp -P servername@IP:/serverpath/file /hostpath/dir/其中servername为登录服务器的用户名，IP为服务器的ＩＰ，serverpath为需要下载的文件路径，ｆｉｌｅ为文件名，/hostpath/dir/为本地存放路径上传文件scp -P /hostpath/dir/file servern...

原创 笔记本安装ubuntu后触控板失灵

文章目录很奇妙查看history的时候有以下操作：114 sudo modprobe -r psmouse115 sudo modprobe psmouse proto=imps116 sudo vim /etc/modprobe.d/options117 sudo add-apt-repository ppa:yannubuntu/boot-repair && ...

翻译 pycharm快捷键

原创 源码安装sip&pyqt4 for ubuntu,anconda3,python3

文章目录下载sip编译安装sip下载pyqt4编译安装pyqt4导入包下载siphttps://www.riverbankcomputing.com/software/sip/download编译安装sip假设下载路径是~/Download/cd ~/Download/tar zxvf sip-xxx.tar.gzcd sip-xxxsudo ~/anaconda3/bin/py...

翻译 DeepLearning.AI第一部分第四周：深层神经网络

文章目录

翻译 Qt学习

文章目录布局label控件button控件的使用实现button与lebel联动控件信号与槽布局四种布局label控件主要目的为了显示信息可以发射信号,配合槽函数实现特定功能可以修改样式表,显示图片button控件的使用主要用于用户提交, 确认等情况需要有事件处理函数实现特定功能实现button与lebel联动点击按钮,改变lebel显示内容控件信号与槽...

原创 打包python程序

文章目录python程序的缺点python程序打包早期的python打包工具使用pyinstaller工具python程序的缺点解释性语言, 容易暴露源程序脱离解释器后, 不容易运行python程序打包能够隐藏源码, 保护核心技术和知识产权便于发布程序可以脱离python环境在任意电脑上执行早期的python打包工具py2exe智能在Windows平台打包不能打包为...

原创 ubuntu安装qt4

文章目录更新源安装qt更新源最好用清华的源,比较快$sudo apt-get update安装qt$sudo apt-get install qt*