
tensorflow学习
tianzhiya121
这个作者很懒,什么都没留下…
展开
-
如何将原始数据转化为词向量
动机研究文本分类时候,不清楚如何将文本转化为向量的过程。因此无法针对自己的数据集进行构建词向量。目的熟悉tf.data.Dataset函数,熟悉文本分类数据集构建的过程一、加载环境二、将文本加载到数据中1.将相同类型的数据,下载到不同的文本文件(如何使用python将mysql同一类型异常数据每行下载到一个txt文本中对应行。对每一个类型的异常数据这样操作。)2....原创 2019-11-21 17:57:51 · 2979 阅读 · 0 评论 -
tensorflow数据篇(二)——tf.data.Dataset常用函数
动机tf.data.Dataset用来构建数据输入管道,其涉及许多重要函数,总结在此,为下节准备。目标了解tf.data.Dataset必备的函数功能,以及参数作用,仅仅涉及图像处理。tf.data.Dataset常用函数Dataset表示一个元素的集合,可以看作函数式编程中的 lazy list, 元素是tensor tuple。创建Dataset的方式可以分为两种,分...转载 2019-04-15 10:59:37 · 4229 阅读 · 0 评论 -
tensorflow数据篇(一)——使用tf.data加载数据
使用tf.data加载数据动机此篇教程指于如何使用tf.data加载数据,本文所用图片分布在各个目录之中,每一个目录拥有一类图片。目标了解数据集所需要的信息 建立tf.data.Dataset对象图像数据集下载后需要了解的信息:图像的数量、格式和路径,标签数量、格式和标签路径 图像的尺寸以及通道数 图像使用图像库随机显示部分图像建立tf.dat...翻译 2019-04-14 21:25:15 · 1835 阅读 · 0 评论 -
Tensorflow基础概念回顾
1.Tensorflow运行主流程构建计算图(tf.Graph)->运行计算图2.计算图构成 操作(简称“op”):图的节点。操作描述了消耗和生成张量的计算。 张量:图的边。它们代表将流经图的值。大多数 TensorFlow 函数会返 回tf.Tensors。 重要提示:tf.Tensors不具有值,它们只是计算图中元素的手柄。3.张量te...翻译 2019-04-02 16:42:29 · 153 阅读 · 0 评论 -
如何使用tensorflow的队列和多线程读取数据
使用队列和多线程读取数据架构--加快训练速度、异步读取和训练1.创建协调器tf.train.coordinator实例,系统器用于协调多个线程同时停止、报告出错和等待线程停止。示例代码:coord = Coordinator()2.利用tf.train.queue_runner创建线程,并将协调器传入每一个线程。并在线程中,完成所需工作。典型带有协调器的线程示例代码:threa...原创 2019-04-02 12:41:21 · 207 阅读 · 0 评论 -
如何使用tfrecord?
目的了解tfrecord文件格式,并学会如何write和read此文件。tfrecord文件内部快速浏览一、传统方法如果你的每一条特征都是列表,且列表中包含着相同类型的值,例如图像等。 1.创建包含特征的列表,使用tf.train.BytesList,tf.train.FLoatList,tf.train.Int64List 字段features包...原创 2019-03-26 13:57:44 · 461 阅读 · 0 评论