
TensorFlow
文章平均质量分 87
fly-iot
没什么大不了,一直写代码。
展开
-
【TensorFlow】:在Linux上安装nvidia-docker环境,解决显卡切换问题,只需要几步就可以成功安装,安装之后登陆不了界面,只能变成服务器模式命令后执行了。
运行之前的gpt-2-simple的项目,使用gpu镜像,结果就OOM了。看来4G内存还是太小了。原创 2023-03-09 08:28:50 · 971 阅读 · 0 评论 -
【tensorflow】:使用docker进行源代码编译tensorflow,镜像里面的环境都配置好了,只要执行编译,设置好内存,cpu参数就行了。
打算找个便宜的主机,拆下系统盘,做模型训练,等需要电脑配置升级了卖了买新的。为啥选择这么便宜的电脑呢,主要利用的就是是rtx3060的12G显存。可以购买好多台,然后进行Tensorflow集群,做训练。主要还是没钱,穷。tesnsorflow使用 devel 进行支持源代码的编译,非常的方便。里面的babel 都配置好了,只要设置好了内存,慢慢等待编译结果就行了。就可以直接在当前的镜像中进行安装即可。原创 2023-03-06 23:12:33 · 878 阅读 · 0 评论 -
研究开源gpt-2-simple项目,跑一个简单的模型,然后生成一段对话。用的是 Intel(R) Core(TM) i7-9700,8核8线程,训练最小的模型200次跑1个小时20分钟
ai果然是高技术含量的东西,代码啥的不多,就是没有太看懂。然后消耗CPU和GPU资源,也是非常消耗硬件的。这个很小的模型训练200次,都这么费时间,更何况是大数据量多参数的模型呢!!同时这个基础设施也要搭建起来呢,有个项目要研究下了,就是得去研究服务器集群了,因为Nvidia的限制,服务器上跑的都是又贵又性能低的显卡。但是可以本地跑集群做训练呢!!!原创 2023-03-03 23:02:15 · 1661 阅读 · 0 评论 -
推出 TensorFlow 中文视频:机器学习从零到一,Google官方发布视频,有美女主持,美女声音甜美特别好,有B站地址,超级高清看美女费颖教你学机器学习TensorFlow,只有码农才懂的。
关于机器学习地址https://mp.weixin.qq.com/s/dIt3pv0UPItk4tVVeRsWDQ美女声音甜美。大家赶紧去学习。直接通过微信的地址打开视频是没有广告的。https://mp.weixin.qq.com/s/dIt3pv0UPItk4tVVeRsWDQ美女叫 费颖推荐直接从 B站上看,超级高清的!!B站上面也有相关的视频。这个没有广告!!!也有 google 官方的视频:https://www.bilibili.com/video/BV1kZ4y1p7rb原创 2020-10-14 09:09:17 · 815 阅读 · 0 评论 -
TensorFlow(10):TensorFlow GPU docker 镜像相关事情,凡是扯上GPU的镜像都超级大。runtime 的包稍微小点。
目录前言1,关于 Enabling GPUs in the Container Runtime Ecosystem2,Jetson NVIDIA 开发板4,关于 NVIDIA 的 GUP docker6,总结前言相关TensorFlow 全部分类:https://blog.youkuaiyun.com/freewebsys/category_6872378.html本文的原文连接是:https...原创 2020-04-23 09:32:49 · 539 阅读 · 0 评论 -
TensorFlow(8):xubuntu18.04 安装nvidia-docker2,可以使用nvidia-smi 命令,使用docker --runtime=nvidia 启动TF的GPU镜像
111原创 2020-04-09 12:53:50 · 1788 阅读 · 0 评论 -
TensorFlow(9):Xubuntu 18.04 安装 OpenVINO™ toolkit for Linux,安装驱动,intel的CPU和GPU 跑着没啥区别,然后运行demo程序识别
目录前言1,关于openVINO2,下载地址:3,运行demo4,总结前言相关TensorFlow 全部分类:https://blog.youkuaiyun.com/freewebsys/category_6872378.html本文的原文连接是:https://blog.youkuaiyun.com/freewebsys/article/details/105321790未经博主允许不得转载。博主地址...原创 2020-04-05 10:11:44 · 1453 阅读 · 0 评论 -
Google 升级 TensorFlow 2.0 Alpha ,发布机器学习新硬件 coral开发板
本文的原文连接是: https://blog.youkuaiyun.com/freewebsys/article/details/88323020未经博主允许不得转载。博主地址是:http://blog.youkuaiyun.com/freewebsys1,关于coral是一个 google 在 发布 TensorFlow 2.0 的时候顺便发布的。https://tensorflow.google.cn/...原创 2019-03-07 22:58:06 · 1958 阅读 · 1 评论 -
TensorFlow(7):jupyter notebook docker image 使用root 进行安装软件
前言本文的原文连接是: https://blog.youkuaiyun.com/freewebsys/article/details/81665552未经博主允许不得转载。博主地址是:http://blog.youkuaiyun.com/freewebsys1,关于上次在 https://blog.youkuaiyun.com/freewebsys/article/details/84847904中使用了jupyte...原创 2018-12-12 09:46:20 · 751 阅读 · 0 评论 -
TensorFlow(6): 使用Ubuntu 16.04 server 安装,TensorFlow-gpu ,cuda 9.0, cudnn 7.1 折腾一天总结下
11原创 2018-09-02 21:15:44 · 718 阅读 · 0 评论 -
TensorFlow(5):使用tensorflow-gpu版本测试下学习速度,cpu(3分钟) vs gpu(4秒),还是gpu快
使用gpu进行优化还是不错的。速度超级快,4 秒就行,要是cpu的还要跑个3 分钟。现在看来在windows 上面开发个 tensorlfow的代码还可以。除了编译,要用还行,同样的安装cuda,cudnn 在 linux上面也是类似的。优化还是很方便的。以后学习起来就方便多了。原创 2018-07-30 00:25:04 · 25892 阅读 · 29 评论 -
TensorFlow(3):windows 上面使用python3.6 安装tensorflow-gpu版本
主要安装就是需要确定版本的问题。使用python3.5 x64 使用 pip 安装 tensorflow-gpu需要安装 cuda 9.0 x64 解压缩 cudnn 到 相应的 bin lib 目录。然后就可以了,版本一定要一一对应才行。下一步看看gpu的效果。原创 2018-07-29 23:20:17 · 5812 阅读 · 0 评论 -
PythonStock(17):使用scikit-learn进行股票分析
scikit-learn 使用起来真的是超级的方便。预测数据只要两行。fit 和 predict 就可以了。模型好多可以随便选。机器学习特别好的地方是。这个数据你可以是股票数据,可以是房价数据。可以是天气数据,啥都行,都能找到一个相关性,然后给出一个结果。当然这个应该只是个最简单的预测数据。股票应该没有那么容易的预测。有好多的因素需要考虑。而且每一个股票都是一个规律。原创 2018-01-04 19:00:57 · 10668 阅读 · 5 评论 -
关于 TensorFlow 的一些资料,多学习models 模块
1,关于TensorFlow 官方网站官方网站:https://www.tensorflow.org/ github 代码 :https://github.com/tensorflow 上面包括其他的子项目代码。关于艺术训练学习的子项目: https://github.com/tensorflow/magenta google 研究的模型,分为官方的,研究的。 https://github原创 2017-12-28 16:48:10 · 2345 阅读 · 0 评论 -
PythonStock(10):使用notebook + tushare + pandas 简单的股票分析,蜡烛图
前言使用Python开发一个股票项目。 项目地址: https://github.com/pythonstock/stock 相关资料: http://blog.youkuaiyun.com/freewebsys/article/details/78294566 主要使用开发语言是python。 使用的lib库是pandas,tushare,TensorFlow,tornado等。本文的原原创 2017-10-20 13:48:31 · 14044 阅读 · 2 评论 -
PythonStock(9):使用优矿uqer.io 进行简单的数据分析
前言使用Python开发一个股票项目。 项目地址: https://github.com/pythonstock/stock 相关资料: http://blog.youkuaiyun.com/freewebsys/article/category/7076584 主要使用开发语言是python。 使用的lib库是pandas,tushare,TensorFlow,tornado等。本文的原创 2017-10-20 08:32:04 · 5824 阅读 · 0 评论 -
TensorFlow(2):给TensorFlow Image 打补丁增加 TuShare 支持
1,关于TuShareTuShare 是一个python的lib 库非常好用。 并且是适合国内的股票市场的,可以直接下载国内的股票数据。 非常的方便。 同事 TensorFlow 已经支持了 Numpy。直接在这个上面增加TuShare类库就好了。 而且docker 的有点就出来了。一层一层的叠加了。2,增加镜像和上次一样重新增加一个启动脚本: http://blog.youkuaiyun.com/f原创 2017-04-20 21:19:56 · 2531 阅读 · 0 评论 -
TensorFlow(1):使用docker镜像搭建TensorFlow环境
1,关于TensorFlowTensorFlow 随着AlphaGo的胜利也火了起来。 google又一次成为大家膜拜的大神了。google大神在引导这机器学习的方向。 同时docker 也是一个非常好的工具,大大的方便了开发环境的构建,之前需要配置安装。 看各种文档,现在只要一个 pull 一个 run 就可以把环境弄好了。 同时如果有写地方需要个性化定制,直接在docker的镜像上面再加原创 2017-04-19 20:28:29 · 32635 阅读 · 1 评论