- 博客(24)
- 收藏
- 关注
RSS订阅原创 sklearn数据预处理和特征工程
1 数据挖掘的五大流程1. 获取数据2. 数据预处理数据预处理是从数据中检测，纠正或删除损坏，不准确或不适用于模型的记录的过程可能面对的问题有：数据类型不同，比如有的是文字，有的是数字，有的含时间序列，有的连续，有的间断。也可能，数据的质量不行，有噪声，有异常，有缺失，数据出错，量纲不一，有重复，数据是偏态，数据量太大或太小数据预处理的目的：让数据适应模型，匹配模型的需求3. 特征...
2019-10-02 22:44:52
1211
原创 shell编程(八):文本处理三剑客之awk
awk的工作模式语法格式第一种形式awk 'BEGIN{}pattern{commands}END{}' file_nameBEGIN{}表示文本开始之前，进行{}内的操作END{}表示文本开始以后，进行{}内的操作pattern 表示对那些行进行操作，不写则默认是所有行{commands}对行进行的操作,可以写多个命令第二种形式cat file_name | awk 'B...
2019-09-18 00:13:59
390
原创 shell编程(六):文本处理三剑客之grep
grepgrep语法格式第一种形式grep [option] [pattern] [file1,file2]pattern可以是固定字符串或者正则表达式第二种形式command | grep [option] [patern]grep参数参数含义-v不显示匹配行信息-i搜索时忽略大小写-n显示行号-r递归搜索-E支持正则表达...
2019-09-10 00:01:21
266
原创 shell编程(五):bash数学运算值bc
什么是bcbc是bash内建的运算器，支持浮点数运算内建变量scale（精度）可以设置，默认为0bc客户端中使用scale=223/4>>>5.75shell中使用bcecho "scale=4;23.3/3.5" | bc>>>6.6571# 运算结果复制给另外一个变量num=`echo "scale=4;23.3/3.5" | bc`...
2019-09-09 23:34:41
446
原创 shell编程(五):bash数学运算值expr
数学运算的两种方式语法方法一expr $num1 opeartor $num2方法二$(($num1 operator $num2))expr 操作符对照表expr支持正常的操作符。操作符含义num1 | num2num1不为空且非0，返回num1，否则返回num2num1 & num2num1不为空且非0，返回num...
2019-09-09 00:03:02
687
原创 shell编程(四):有变量类型
declare和typeset命令declare和typeset命令两者等价，都是用来定义变量类型的declare命令**参数列表参数含义-r将变量设为只读-i将变量设为整数-a将变量定义为数组-f-F进显示此脚本前定义过的函数名-x将变量声明为环境变量declare -rvar="hello world" # 普通变量...
2019-09-03 23:55:43
1147
原创 shell编程(三): 命令替换
语法格式方法一`command`方法二$(command)示例获取系统所有用户名并输出index=1for user in `cat /etc/passwd | cut -d ":" -f 1`do echo "This is $index user:$user" index=$(($index + 1)) # $后面跟上两个小括号就是算术运算done根据系统...
2019-09-03 00:21:36
175
原创 shell脚本(二)：字符串处理练习
字符串处理练习主要针对上一讲进行一个综合练习。题目变量string=“Bigdata process frame is Hadoop, Hasoop is an open source project”，执行脚本后，打印输出string字符串变量，并给出用户一下选项：打印string长度删除字符串中所有的Hadoop替换第一个Hadoop为MapReduce替换全部的Hadoop为...
2019-09-02 00:10:55
246
原创 shell编程(一)：字符串处理
变量替换从头开始匹配删除字符串中内容var="I love you, Dou you love me?"var1=${var#*ov} # 非贪婪模式>>> e you, Dou you love me?var2=￥{var##*ov} # 贪婪模式>>>e me?从变量尾部尽心规则匹配并删除var="I love you, Dou you ...
2019-08-31 23:49:37
249
原创 np.clip() 用法 Numpy 中clip函数的使用
numpy中clip函数用法详解numpy.clip(a, a_min, a_max, out=None)参数说明 a : 输入的数组a_min: 限定的最小值 也可以是数组 如果为数组时 shape必须和a一样a_max:限定的最大值 也可以是数组 shape和a一样out：剪裁后的数组存入的数组举例>>> a = np.arange(10)...
2018-05-09 23:43:24
83946
5
原创 vscode python Anaconda 配置
1. 安装Anaconda下载地:https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/一路安装下去，注意一点，勾选上 加入环境变量 选项 2. 测试python是否安装成功打开cmd 输入python,出现下图则说明环境变量没问题. 如果步骤1中没有加入到环境变量.则手动添加环境变量到 系统环境变量的path下。...
2018-05-03 19:19:12
65967
2
转载 Ubuntu16.04 安装UHD GNU Radio教程
安装分三步：安装Ubuntu16.04系统，务必从官网下载系统。 推荐使用安装工具:Universal USB Installer。首先安装UHD安装GNURadio安装UHD注意:由于许多步骤需要在管理员权限下执行 所以直接切到管理员权限下,输入su输入管理员密码即可,如果出现认证失败,执行下面步骤sudo passwd root输入新的密码 后再次执行 su 进入到管理员权限下.1. 安装...
2018-04-03 09:35:50
10185
转载 Tensorflow + Cuda8+cudnn6+python3.5 安装流程
本人安装GPU版本的Tensorflow的流程本人电脑配置:win10 + gtx1060安装版本:python3.5cuda8cudnn61. 安装python3.5 直接安装ancoda, 在cmd下 输入python 即可看到版本号2. 安装coda8 直接安装。按下图选择即可。3. 安装cudnn6 下载后解压，把对应文件夹下的内容拷贝到cuda/v8.0文件夹下的...
2018-03-19 13:14:19
841
原创 Vs Code C++配置详解
我安装的插件 C/C++（就是有些教程里的cpptools）Code RunnerInclude Autocomplete：提供头文件补全C/C++ Snippets：Snippets即重用代码块MinGW安装目前windows下调试仅支持 Cygwin 和 MinGW。这里使用的是MinGW. 官网地址:ht...
2018-03-15 21:28:58
16644
3
翻译 pudub 异常分析 Decoding failed. ffmpeg returned error code: 1
- 今天测试pudub这个库 怎么运行都出错，出现如下错误！ raise CouldntDecodeError("Decoding failed. ffmpeg returned error code: {0}\n\nOutput from ffmpeg/avlib:\n\n{1}".format(p.returncode, p_err))pydub.exceptions.Could...
2018-02-25 14:30:35
6768
5
原创 VS Code python 关闭pylink提醒
"python.linting.pylintArgs": [ "--disable=W,C,E" ],
2018-02-19 22:21:14
7371
原创 pandas层次索引应用-对广告点击率数据进行统计
1.原始数据形式 hour id clicked1 1 02 1 1 2 0 4 13 1 1hour代表时间，id代表广告号，clicked代表是否被点击，1表示被点击了，下面将他转换成每个时刻，每个
2018-01-22 14:36:28
569
转载 python求解定积分
【转载地址】http://blog.youkuaiyun.com/tanlangqie/article/details/78243188 感谢原作者！python的numpy库集成了很多的函数。利用其中的函数可以很方便的解决一些数学问题。本篇介绍如何使用python的numpy来求解积分。代码如下：# -*- coding: utf-8 -*-import numpy as npfrom scipy.i
2018-01-02 14:07:26
14337
转载 Python 2.7 import matplotlib出现UnicodeDecodeError错误
将软件重装过了，扩展库也重装过，都无法解决，最后针对UnicodeDecodeError进行解决。按照网上教程，在交互环境写入如下语句：import sysreload(sys)sys.setdefaultencoding(‘utf-8’)重新导入matplotlib，结果又出现其它错误：问题没解决，听说系统内部默认编码是gbk，就尝试了一下以下代码：
2017-11-24 13:25:38
1675
原创 邹博机器学习代码分析(1)-线性回归
1.导入各种需要的包import csvimport numpy as npimport matplotlib as mplimport matplotlib.pyplot as pltimport pandas as pdfrom sklearn.model_selection import train_test_splitfrom sklearn.linear_model
2017-06-20 23:38:41
2034
原创 PyCharm更换sublime类似主题
1. 下载jar主题包下载地址:https://github.com/spasserby/PyCharm-monokai2.导入pycharm设置导入方法：file-->Import Setting-->***.jar(找到下载的主题包)3.重启4.修改默认提示错误方法:file-->settings-->colors&Front-->General-->Errors an
2017-05-07 16:19:55
12925
转载 Python3.6下scrapy框架的安装
转载地址：http://blog.youkuaiyun.com/liuweiyuxiang/article/details/68929999首先考虑使用最简单的方法安装[plain] view plain copy pip install scrapy 命令安装，提示 Failed building wheel
2017-04-24 20:30:57
37882
原创 windows下PyCharm安装及使用
【传送门】pycharm虽然好用，但是比较臃肿，推荐使用Vscode，详见另外一篇文章：https://blog.youkuaiyun.com/yctjin/article/details/80184988一、首先安装pycharm，可以参考这篇文章：http://www.jianshu.com/p/042324342bf4搭建环境1、win10_X64，其他Win版本也可以。2...
2017-04-21 08:54:47
122638
2
转载 UBUNTU 14.04 安装fcitx-sougoupinyin, sublime text 3, 解决中文输入
适用于新安装的系统，要是做了很多操作，那就不好说了换成163的源，更新，language support里添加中文，界面语言是不必设为中文的到http://pinyin.sogou.com/linux/?r=pinyin下载deb包安装language support里输入方式选为fcitx重启，sougoupinyin 安装成功安装sublime text 3sudo add-a
2017-04-06 19:27:49
382
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人