<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[user_lib的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/user_lib</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; user_lib]]></copyright><item><title><![CDATA[在linux + RTX3080上运行深度学习的经验]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/127151198</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/127151198</guid><author>user_lib</author><pubDate>Mon, 03 Oct 2022 13:28:41 +0800</pubDate><description><![CDATA[RTX30系跑深度学习]]></description><category></category></item><item><title><![CDATA[mpi安装与配置]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/126329198</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/126329198</guid><author>user_lib</author><pubDate>Sun, 14 Aug 2022 10:46:08 +0800</pubDate><description><![CDATA[UBUNTU安装配置MPICH]]></description><category></category></item><item><title><![CDATA[ZGS 算法]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/124177349</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/124177349</guid><author>user_lib</author><pubDate>Thu, 14 Apr 2022 17:34:21 +0800</pubDate><description><![CDATA[引言
2006年的一篇论文《Map-Reduce for Machine Learning on Multicore》[1]在PAC(probably approximate correct)理论和SQL(Statistical Query Learning)[2]理论的框架下，指出了“求和形式算法”可以自然的利用多CPU并行训练（也可以推广到MapReduce编程范式下并行训练）。我们见到的绝大多数使用MapReduce进行训练的模型，都可以归结到这篇论文中提出的形式，它们本质上对于算法本身没有进行任何修]]></description><category></category></item><item><title><![CDATA[Linux: centos SSH无密登陆]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/124148185</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/124148185</guid><author>user_lib</author><pubDate>Wed, 13 Apr 2022 15:05:33 +0800</pubDate><description><![CDATA[文章目录三台Centos7 的SSH无密登陆1. 第一步检查是否安装ssh(这里假设已经有的情况）2.  第二步生成私钥与公钥3.  公开公钥到多台虚拟机成功！
三台Centos7 的SSH无密登陆
1. 第一步检查是否安装ssh(这里假设已经有的情况）
which ssh

2.  第二步生成私钥与公钥
假设三台虚拟机分别为node1,node2,node3
首先对node1进行以下操作：
cd /root/ #若以root登陆选择这个
cd /home/ #若以用户登陆选择这个
ssh-keygen -]]></description><category></category></item><item><title><![CDATA[Openslide安装问题解决方法]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/123931748</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/123931748</guid><author>user_lib</author><pubDate>Sun, 03 Apr 2022 00:27:26 +0800</pubDate><description><![CDATA[1. 别人的方法

照着该方法并没有成功！！
2. 修改方法为：
import os
os.add_dll_directory("openslide-bin-path")

3. 使用笔记

]]></description><category></category></item><item><title><![CDATA[Pytorch统计网络参数计算工具、模型 FLOPs, MACs, MAdds 关系]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/123452572</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/123452572</guid><author>user_lib</author><pubDate>Sat, 12 Mar 2022 23:44:37 +0800</pubDate><description><![CDATA[Pytorch统计网络参数
#网络参数数量
def get_parameter_number(net):
    total_num = sum(p.numel() for p in net.parameters())
    trainable_num = sum(p.numel() for p in net.parameters() if p.requires_grad)
    return {'Total': total_num, 'Trainable': trainable_num}

#查看网络]]></description><category></category></item><item><title><![CDATA[pytorch学习]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/123313393</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/123313393</guid><author>user_lib</author><pubDate>Sun, 06 Mar 2022 17:18:43 +0800</pubDate><description><![CDATA[文章目录1. nn.Module2. .to(张量不执行inplace操作，因此要重新赋值)
1. nn.Module
我们在定义自已的网络的时候, 需要继承nn.Module类, 并重新实现构造函数__init__构造函数和forward这两个方法。
技巧：

一般把网络中具有可学习参数的层（如全连接层、卷积层等）放在构造函数__init__()中，当然我也可以吧不具有参数的层也放在里面
forward方法是必须要重写的，它是实现模型的功能，实现各个层之间的连接关系的核心
一般把不具有可学习参数的层(如R]]></description><category></category></item><item><title><![CDATA[Docker安装Mysql 5.7镜像并本地Navicat远程连接——基于阿里云服务器]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/123153590</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/123153590</guid><author>user_lib</author><pubDate>Sat, 26 Feb 2022 18:20:37 +0800</pubDate><description><![CDATA[文章目录1.拉取mysql 5.72.运行mysql 5.7容器3.进入到容器中4.开启远程访问权限5. 添加阿里云服务器防火墙规则
1.拉取mysql 5.7
docker pull mysql:5.7

2.运行mysql 5.7容器
mkdir mysql_docker
cd mysql_docker/
echo $PWD
docker run --name mysqlserver -v $PWD/conf:/etc/mysql/conf.d -v $PWD/logs:/logs -v $PWD/da]]></description><category></category></item><item><title><![CDATA[Centos 7: Python与yum的卸载与重新安装]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/122772202</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/122772202</guid><author>user_lib</author><pubDate>Wed, 02 Feb 2022 21:23:56 +0800</pubDate><description><![CDATA[卸载python

rpm -qa|grep python|xargs rpm -e --allmatches --nodeps

whereis python|xargs rm -fr


卸载yum

rpm -qa|grep yum|xargs rpm -e --allmatches --nodeps
rm -rf /etc/yum.repos.d/*
whereis yum|xargs rm -fr


重装python2.7

mkdir /usr/local/src/python
cd /us.]]></description><category></category></item><item><title><![CDATA[安装docker-compose]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/122768072</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/122768072</guid><author>user_lib</author><pubDate>Wed, 02 Feb 2022 10:11:56 +0800</pubDate><description><![CDATA[安装 Docker Compose
Docker Compose 存放在Git Hub，不太稳定。
你可以也通过执行下面的命令，高速安装Docker Compose。
curl -L https://get.daocloud.io/docker/compose/releases/download/v2.2.3/docker-compose-`uname -s`-`uname -m` &gt; /usr/local/bin/docker-compose

chmod +x /usr/local/bin/doc]]></description><category></category></item><item><title><![CDATA[Docker常用命令]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/122747278</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/122747278</guid><author>user_lib</author><pubDate>Sat, 29 Jan 2022 20:25:47 +0800</pubDate><description><![CDATA[常用命令大全见链接
Docker 安装、常用命令、应用部署

]]></description><category></category></item><item><title><![CDATA[联邦学习开源框架调研]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/122742679</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/122742679</guid><author>user_lib</author><pubDate>Sat, 29 Jan 2022 15:01:05 +0800</pubDate><description><![CDATA[1. FATE
FATE 是微众银行人工智能部门发起的一个开源项目，旨在提供一个安全的计算框架来支持联合人工智能生态系统。它实现了多种安全计算协议，以实现大数据协作与数据保护法规合规性。凭借模块化的可扩展建模流水线、清晰的可视化界面和灵活的调度系统，FATE 获得了开箱即用的可用性和出色的运行性能。

FATE项目使用多方安全计算 (MPC) 以及同态加密 (HE) 技术构建底层安全计算协议，以此支持不同种类的机器学习的安全计算，包括逻辑回归、基于树的算法、深度学习和迁移学习等。


功能：全面，同时覆盖横]]></description><category></category></item><item><title><![CDATA[显卡溢价表]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/122341686</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/122341686</guid><author>user_lib</author><pubDate>Thu, 06 Jan 2022 13:38:11 +0800</pubDate><description><![CDATA[截止到2021年12月30日的显卡溢价情况。


]]></description><category></category></item><item><title><![CDATA[SVM研究展望]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/121728044</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/121728044</guid><author>user_lib</author><pubDate>Sun, 05 Dec 2021 17:19:50 +0800</pubDate><description><![CDATA[SVM研究展望方向1. SVM 最大间隔 (寻找数据边界低密度区域思想) 和稀疏损失函数数据分布之间的间隔2. SVM 非线性学习3. 深度 SVM 与广度 SVM
方向
回归问题、多分类问题、多示例问题、多标记问题、多视角问题、特征压缩问题、时间序列问题、半监督学习问题[和无监督学习问题, 而且包括深度学习 和广度学习 等新的研究热点

从理论上研究如何提高各种 SVM 的泛化能力使其达到期望风险更紧的上界;
从模型上研究新的正则化项、损失函数和核函数的构建及其适用范围;
由于 SVM 需要求解优化问题,]]></description><category></category></item><item><title><![CDATA[centos网络问题]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/121118845</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/121118845</guid><author>user_lib</author><pubDate>Thu, 04 Nov 2021 17:04:01 +0800</pubDate><description><![CDATA[解决CentOS没有ip地址的问题
当你发现VMware虚拟机中的CentOS系统，启动后没有获取到ip地址，可以尝试本文介绍的几种方法来修复。
1，
我第一次在VMWare中装CentOS，启动后就没有ip地址，用ip addr命令（CentOS默认没有ifconfig命令）查询不到ip地址。这时，运行sudo dhclient，通过DHCP的方式获取地址，一般就能解决问题。
$ vim /etc/sysconfig/network-scripts/ifcfg-ens33
TYPE="Ethernet"
]]></description><category></category></item><item><title><![CDATA[MPI讲义 Part1：并行计算的基础]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/119945955</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/119945955</guid><author>user_lib</author><pubDate>Fri, 27 Aug 2021 15:55:16 +0800</pubDate><description><![CDATA[1、并行计算
并行计算是一种计算类型，其中许多计算或者过程的执行时同时进行的。

2、硬件
2.1 超级计算机

2.2 并行计算单元

隐式并行
并行执行不同的处理器指令；
自动发生；
程序员只能间接影响。
Multi-core/Multi-CPU
计算单元共享相同的内存
集群
通过交互链接的独立系统
每个系统有自己的内存
加速器
比通用CPU更快的速度执行某些任务
做出不同的权衡
通常有自己的内存
向量处理器/向量单元
同时在多个数据块执行相同的操作


2.3 内存

共享内存（shared memo]]></description><category></category></item><item><title><![CDATA[Github下载速度慢]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/119655275</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/119655275</guid><author>user_lib</author><pubDate>Thu, 12 Aug 2021 22:24:27 +0800</pubDate><description><![CDATA[第一步，
找到hosts文件，一般在

C:\Windows\System32\drivers\etc

利用记事本或者Notepad打开

第二步，
分别在https://www.ipaddress.com/下输入：

github.com
github.global.ssl.fastly.net

得到下图：




第三步，
将上图中的ip地址分别拷贝到刚才打开的hosts文件中。



...]]></description><category></category></item><item><title><![CDATA[Hive安装及配置]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/117220670</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/117220670</guid><author>user_lib</author><pubDate>Mon, 24 May 2021 11:52:31 +0800</pubDate><description><![CDATA[Hive安装及配置Hive安装Hive配置配置hive-site.xml初始化
Hive安装
下载Hive,解压
Hive配置
将hive下的conf文件中的hive-default.xml.template复制为hive-site.xml
sudo cp hive-default.xml.template hive-site.xml

配置hive-site.xml
改配置十分关键，hive无法成功运行，主要在于该文件没有配置成功。

第一步：安装mysql,非常简单，不做详细说明；
第二步：在mysql]]></description><category></category></item><item><title><![CDATA[SCALA与SPARK安装]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/116142368</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/116142368</guid><author>user_lib</author><pubDate>Mon, 26 Apr 2021 08:48:03 +0800</pubDate><description><![CDATA[SCALA安装
下载好scala 2.12.解压到/usr/local/scala
然后添加环境变量
export SCALA_HOME=/usr/local/scala
export PATH=$PATH:$SCALA_HOME/bin

安装SPARK

下载好spark2.4
解压到/usr/local/spark
添加环境变量

export SPARK_HOME=/usr/local/spark
export PATH=$PATH:$SCALA_HOME/bin


配置

cd /usr/loc]]></description><category></category></item><item><title><![CDATA[安装Hadoop Multi Node Cluster]]></title><link>https://blog.youkuaiyun.com/user_lib/article/details/115511362</link><guid>https://blog.youkuaiyun.com/user_lib/article/details/115511362</guid><author>user_lib</author><pubDate>Thu, 08 Apr 2021 15:23:26 +0800</pubDate><description><![CDATA[详细步骤如下将上一节的single node cluster复制到data1设置data11.设置网络配置2.设置主机名3.编辑Hosts文件4.编辑core-site.xml5.编辑YARN-site.xml6.编辑mapred-site.xml7.编辑hdfs-site.xml重复将data1完整复制到data2,data3,master设置master服务器master连接data1,data2,data3创建并格式化NameNode HDFS启动Hadoop Multi Node Cluster
将]]></description><category></category></item></channel></rss>