<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[bewithme的专栏]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/bewithme</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; bewithme]]></copyright><item><title><![CDATA[CentOS7安装nvidia-docker2]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/105092159</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/105092159</guid><author>bewithme</author><pubDate>Wed, 25 Mar 2020 13:01:31 +0800</pubDate><description><![CDATA[1.安装docker-ce

  因为nvidia-docker2依赖docker-ce，所以得先安装docker-ce。

1.1 如果主机上已经安装了docker，则先运行如下命令卸载


service docker stop
yum remove docker

1.2 安装yum管理依赖包


sudo yum install-y yum-utils device-mapper-...]]></description><category></category></item><item><title><![CDATA[docker安装mysql5.6]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/103454243</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/103454243</guid><author>bewithme</author><pubDate>Mon, 09 Dec 2019 19:29:25 +0800</pubDate><description><![CDATA[#拉取镜像
docker pull mysql/mysql-server:5.6


#运行容器
docker run --name mysql5.6 -p 3306:3306 -v /conf:/etc/mysql/conf.d -v  /logs:/logs -v  /data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=xxxx -d mysql/mysql...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/环境用户界面]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89489222</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89489222</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 11:34:23 +0800</pubDate><description><![CDATA[环境用户界面

除了在/etc/skil/skil-env.sh文件中进行更改以更新SKIL环境变量外，还可以使用“SKIL环境”用户界面。此功能从SKIL的1.1版开始提供。

访问环境用户界面

要访问“SKIL环境”用户界面，请导航到SKIL用户界面右上角的“齿轮图标”，然后选择“SKIL环境（SKIL Environment）”。你将看到一个页面，其中列出了SKIL的所有可配置环境变量。你...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/重启Zeppelin解释器]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89488947</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89488947</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 11:23:28 +0800</pubDate><description><![CDATA[重启Zeppelin解释器

Sometimes there might arise a situation where you'll have to refresh/restart your zeppelin interpreters. This could be due to out of memory issues (OOM) or for releasing some of the unw...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/GPU模式]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89488197</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89488197</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 11:12:26 +0800</pubDate><description><![CDATA[GPU模式

默认情况下，SKIL未配置为使用本地可用的GPU资源。此外，你还需要确保SKIL在本地安装了CUDA，以确保驱动程序对你的安装有用。
从SKIL v1.1.0开始，启用SKIL的gpu模式将启用“tensorflow-gpu”。

警告

启用GPU模式后，TensorFlow在执行时占用所有GPU内存，在重新启动Zeppelin解释器之前，你将无法启动任何模型服务器。
避免这个问题...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/许可证]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89488000</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89488000</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 10:49:35 +0800</pubDate><description><![CDATA[许可证

默认情况下，SKIL附带社区版许可证。但是，如果你从Skymind收到企业许可证文件，这些说明将帮助你安装许可证。如果你没有收到许可证，请联系Skymind。

许可证文件示例
SKIL在hood下使用License4J，文件本身包含一个许可证密钥。SKIL许可证如下所示：

enterprise-license.txt


# SKIL License (id: 11230824684...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/高可用]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89485663</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89485663</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 10:42:15 +0800</pubDate><description><![CDATA[高可用

当使用云或自托管基础设施时，实例可能是短暂的。在devops的上下文中，“发生的事情”可以翻译为“我可以获得大量的流量，并且我的一个服务将会中断”。高可用性意味着设置SKIL以提供最佳性能级别。

“高可用性”是指应用程序的连续工作，即使你丢失了一个节点或在集群内遭受网络拆分。要使SKIL部署具有HA功能，你需要以HA方式配置基础结构。



故障维修点
为了消除故障并实现高可用性，必...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/R解释器]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89485492</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89485492</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 08:58:11 +0800</pubDate><description><![CDATA[R解释器

对于那些不想使用诸如Scala或Java之类的JVM语言，或者像Python这样的另一种语言的人来说，笔记本也有一个Zeppelin解释器。R解释器对于某些数据转换或可能难以转换为另一种语言的预写脚本很有用。

扩展SKIL dockerfile
你可以轻松地扩展skil-ce dockerfile并在docker镜像上安装R包。假设你了解了如何使用基本docker命令，那么就在系统上...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/Spark解释器]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89485369</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89485369</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 08:44:27 +0800</pubDate><description><![CDATA[Spark解释器

可以配置笔记本和Zeppelin Spark解释器，以使用Spark来获得更多的处理能力。如果本地Spark实例的计算能力不足，这将非常有用。你可以通过右上角的用户名下拉菜单访问解释器设置，如下图所示。



访问解释器


搜索Spark解释器并单击“编辑”按钮



编辑Spark解释器设置


你可以按“+”按钮添加额外的键/值对。你可以在这里找到其他可配置的spark...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/日志]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89485309</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89485309</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 08:27:55 +0800</pubDate><description><![CDATA[日志

你可以通过多种方式与SKIL集成和访问日志。日志配置对于需要从大型集群以有组织的方式获取日志的更复杂的devops和部署非常有用。

Logback.xml Appenders

如果你最喜欢的日志记录服务使用logback appenders，则可以将自定义的logback.xml文件放在/etc/skil/logback.xml中。

不要删除已有的appenders

如果你的SKI...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/负载均衡]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89485292</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89485292</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 08:15:02 +0800</pubDate><description><![CDATA[负载均衡

因为SKIL将ZooKeeper用于它的devops基础设施，SKIL集群已经配置为多个服务器，将自动负载均衡所有传入的请求。确保集群配置正确并连接到ZooKeeper实例。



端口9008

9008中公开的HTTP API将请求路由到所有其他SKIL节点。

负载均衡策略

所有请求都是通过round robin策略进行均衡。
...]]></description><category></category></item><item><title><![CDATA[SKIL/配置/内存设置]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89485224</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89485224</guid><author>bewithme</author><pubDate>Wed, 24 Apr 2019 08:07:13 +0800</pubDate><description><![CDATA[内存设置

神经网络需要内存，而更雄心勃勃的SKIL项目将需要更多的内存分配给SKIL和笔记本。通常，内存不足是作为java.lang.OutOfMemoryError出现的，并且知道如何更改内存设置可以在将来防止这种情况发生。

环境变量

要解决Zeppelin（笔记本后面的系统）中的内存问题，请增加可用的JVM RAM数量。Zeppelin的默认配置在JVM上提供8GB的RAM和4GB的堆外...]]></description><category></category></item><item><title><![CDATA[SKIL/快速入门]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89469159</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89469159</guid><author>bewithme</author><pubDate>Tue, 23 Apr 2019 16:35:35 +0800</pubDate><description><![CDATA[快速入门

Skymind智能层（SKIL）的社区版是免费的。它是一个数据科学平台，可以快速轻松地将数据科学项目从原型带入到生产部署。SKIL通过面向数据科学家、数据工程师和DevOps/IT的跨团队平台，在python数据科学生态系统和生产JVM环境之间架起桥梁。它是用于机器学习工作流程的自动化工具，可以方便地在Spark-GPU集群上进行训练 ；实验跟踪；训练模型的一键部署；模型性能监控等等。...]]></description><category></category></item><item><title><![CDATA[SKIL/系统要求/多服务器要求]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89468672</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89468672</guid><author>bewithme</author><pubDate>Tue, 23 Apr 2019 11:34:13 +0800</pubDate><description><![CDATA[多服务器要求

SKIL可以在单节点和多节点配置中工作。在多节点设置中，你可以利用不同的机器扩展模型服务或训练，以满足你的业务需求。
对于所有多服务器（群集）设置，应将以下软件版本与SKIL一起使用：

软件
			版本
		Apache Spark
			1.6.x
		ZooKeeper
			3.4.x
		SKIL训练与推理集群

用于训练的SKIL集群允许组织架构中的不同分组共享计算资源...]]></description><category></category></item><item><title><![CDATA[SKIL/系统要求/单服务器要求]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89468571</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89468571</guid><author>bewithme</author><pubDate>Tue, 23 Apr 2019 11:14:56 +0800</pubDate><description><![CDATA[单服务器要求

单节点SKIL安装的最低要求是：

带AVX指令的四核处理器
	16 GB RAM
	最小1Gbps网络连接
	50GB磁盘空间
以下规格建议用于生产：

八核或更好的处理器，带AVX2指令
	64 GB RAM
	最小1Gbps网络连接
	500GB+ 磁盘空间
...]]></description><category></category></item><item><title><![CDATA[SKIL/系统要求]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89468140</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89468140</guid><author>bewithme</author><pubDate>Tue, 23 Apr 2019 11:10:01 +0800</pubDate><description><![CDATA[系统要求

SKIL可以以多种方式部署，尤其是作为单个节点独立服务器或作为多个节点/服务器协同工作的集群。

单节点服务器通常用于开发和集成测试，或者用于非常小的工作负载，而多节点配置将部署在类似生产的设置中。

在正常操作期间，SKIL生成许多子进程。在单节点环境中，SKIL可以生成和管理的子进程的数量受物理机器规范的限制。

因此，扩展较大的SKIL集群需要扩展节点，限制因素是可用于SKIL操...]]></description><category></category></item><item><title><![CDATA[SKIL/版本信息]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89467616</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89467616</guid><author>bewithme</author><pubDate>Tue, 23 Apr 2019 10:55:55 +0800</pubDate><description><![CDATA[版本信息

SKIL打包的版本基于特定的主要版本。它们可能包含基础版本中可能不存在的其他转发提交和/或补丁，或者它们可能缺少某些尚未稳定到可以作为SKIL一部分发布的提交。
SKIL v1.1与v1.0.0-beta中的dl4j组件一起发布

DL4J 栈

组件
			版本
		deeplearning4j
			1.0.0-beta3
		libnd4j
			1.0.0-beta3
		nd...]]></description><category></category></item><item><title><![CDATA[SKIL/发行说明]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89465520</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89465520</guid><author>bewithme</author><pubDate>Tue, 23 Apr 2019 10:34:43 +0800</pubDate><description><![CDATA[发行说明

SKIL 1.2.1

特点和改进

“关于”页现在显示许可证到期日期。
	更新页面以便在许可证过期时更新许可证。
	内部API更改以获得更稳定的用户界面体验。
	添加了“支持zip按钮”，用于共享系统信息、日志和流程信息，以获得更好的客户支持。
	修复了pyspark和spark不匹配的库。
	安spark无需安装7zip。
	添加expirationDate以获取许可证端点 GET...]]></description><category></category></item><item><title><![CDATA[SKIL/身份认证]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89465246</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89465246</guid><author>bewithme</author><pubDate>Tue, 23 Apr 2019 08:58:25 +0800</pubDate><description><![CDATA[身份认证

根据你使用SKIL的方式，始终需要身份认证。有几种方法可以通过SKIL获得身份认证，本文档将指导你完成每种方法。

用户界面



要使用UI进行身份验证，请将浏览器导航到http://&lt;SKIL_IP_Address&gt;:9008/ 并输入以下凭据：

用户名

admin

密码

admin

将&lt;skil_ip_address&gt;替换为SKIL实例的地址或...]]></description><category></category></item><item><title><![CDATA[SKIL/下载]]></title><link>https://blog.youkuaiyun.com/bewithme/article/details/89465220</link><guid>https://blog.youkuaiyun.com/bewithme/article/details/89465220</guid><author>bewithme</author><pubDate>Tue, 23 Apr 2019 08:27:05 +0800</pubDate><description><![CDATA[下载

有关详细信息，请访问SKIL下载页。
要安装SKIL，请根据要执行的安装类型查看单服务器或多服务器页面。
]]></description><category></category></item></channel></rss>