- 博客(30)
- 资源 (347)
- 收藏
- 关注
原创 安装部署(十一) Ubuntu下Rmpi安装测试
Ubuntu下Rmpi安装测试ubuntu 14.04openmpi 0.10[可参考本人之前的mpi4py安装教程]R 3.03在所有机上执行:1、安装:参考:http://www.stats.uwo.ca/faculty/yu/Rmpi/方法一:Rmpi安装包root@py-14:/projects# R CMD INSTALL Rmpi_0
2016-09-08 09:41:10
1671
原创 安装部署(十) Ubuntu下安装R和RMySQL驱动
Ubuntu安装Rubuntu 14.04参考:https://cloud.r-project.org/apt-get updateapt-get install r-baseapt-get install r-base-devsite:选xiamen,快一点启动:命令行输入R回车退出:输入quit()回车Ubuntu下R
2016-09-05 16:54:34
2045
原创 安装部署(九) TensorFlow和SkFlow安装
1. tensorflow installationenvironment:anaconda2gitreferences:https://www.tensorflow.org/versions/r0.10/get_started/os_setup.html#download-and-setuphttp://www.tensorfly.cn/tfdoc/get
2016-08-19 08:52:44
4049
原创 大数据基础(十)Maven构建Hadoop日志清洗项目(二)
Maven Hadoop日志清洗项目(二)Hadoop 2.7.2 Hive 2.1.0 Sqoop 1.4.6参考:http://www.cnblogs.com/edisonchou/p/4464349.html1、将HDFS中清洗好的文件入库hive为了能够借助Hive进行统计分析,首先我们需要将清洗后的数据存入Hive中,那
2016-08-13 22:19:11
1588
原创 大数据基础(九)Maven构建Hadoop日志清洗项目(一)
Maven Hadoop日志清洗项目(一)参考:Maven Hadoop:http://www.cnblogs.com/Leo_wl/p/4862820.htmlhttp://blog.youkuaiyun.com/kongxx/article/details/42339581日志清洗:http://www.cnblogs.com/edisonchou/p/445821
2016-08-13 19:12:12
2519
原创 安装部署(八) Hive+Sqoop安装部署和使用
Hive+Sqoop安装haddoop 2.7.2spark 2.0.0zookeeper 3.4.8kafka 0.10.0.0hbase 1.2.2jdk1.8.0_101ubuntu 14.04.04 x64参考:http://blog.youkuaiyun.com/yinedent/article/details/48275407http://blo
2016-08-12 22:17:52
4400
原创 安装部署(七) HBase集群安装部署与测试
HBase集群安装部署与测试Hadoop 2.7.2 Spark 2.0.0Kafka 0.10.0.0HBase 1.2.2Zookeeper 3.4.8参考:http://www.tuicool.com/articles/VV7bamhttp://blog.youkuaiyun.com/yinedent/article/details/48275407
2016-08-12 12:09:15
6274
原创 安装部署(六) Kafka集群安装部署以及Producer和Consumer的JAVA代码测试
Kafka集群安装部署以及Producer和Consumer的JAVA代码测试kafka 0.10.0.0ubuntu 14.04.04 x64hadoop 2.7.2spark 2.0.0zookeeper 3的集群安装参考spark安装部署中的相应部分。1、下载二进制包https://www.apache.org/dyn/closer.cgi?p
2016-08-11 15:42:50
7993
原创 安装部署(五)Ubuntu系统监控(一)
nmon话不多说,不知道的百度吧apt-get install nmon快捷键:c cpu m memory d disk n network t topreferences:http://www.ibm.com/developerworks/aix/library/au-analyze_aix/http://nmon.sou
2016-08-08 20:07:57
740
原创 安装部署(四) Ubuntu 配置 Java MongoDB驱动
Ubuntu 配置 Java MongoDB驱动ubuntu 14.04.04 x64jdk 1.8.0_101mysql 5.7.14下载http://mongodb.github.io/mongo-java-driver/?_ga=1.167925857.1571059608.1468225171mongodb-driver-3.3.0.jarmon
2016-08-08 20:02:03
1033
原创 安装部署(三) openMQ安装和使用
openMQ安装和使用windows 10 x64jdk 1.71 下载https://mq.java.net/downloads/index.htmlopenmq5_1-binary-windows.zip2 解压到D:\XSetups\openmq5_1-binary-windows{mq_home}=D:\XSetups\openmq5
2016-08-08 20:00:20
2698
原创 安装部署(二) Ubuntu 安装配置 MySQL Connector Java
Ubuntu 安装配置 mysql connector java ubuntu 14.04.04 x64jdk 1.8.0_101mysql 5.7.14下载MySQL Connector/Jhttp://dev.mysql.com/doc/connector-j/5.1/en/connector-j-installing.htmltar xvzf mysql-
2016-08-07 08:51:12
6910
原创 安装部署(一) bash for windows 10安装配置
bash for windowswindows 10 年度更新1 版本1607 x64 专业版1、开启右键开始按钮,控制面板-》程序-》启用或关闭Windows功能-》勾选”适用于Linux的Windows子系统(Beta),确定点开始按钮,设置-》更新和安全-》针对开发人员-》点选“开发人员模式”2、安装右键开始按钮,打开命令行提示符(管理员),输
2016-08-05 23:24:16
5388
原创 大数据基础(八) Spark 2.0.0下IPython和Notebook的安装配置
环境:spark 2.0.0,anaconda2如果装有Anaconda 就可以直接如下方式获得IPython界面的登陆,没有装Anaconda的参考最下边的链接自行安装ipython相关包。vi ~/.bashrcexport PYSPARK_DRIVER_PYTHON=ipythonexport PYSPARK_DRIVER_PYTHON_OPTS="notebook --
2016-08-03 21:48:37
3782
原创 大数据基础(七) Ubuntu 14.04安装MySQL 5.7.14
Ubuntu 14.04安装MySQL5.7.14以下默认root账户,sudo可以省略1.下载集成包bundlehttp://dev.mysql.com/downloads/file/?id=464486http://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-server_5.7.14-1ubuntu14.04_amd64.d
2016-08-01 11:42:13
3046
原创 大数据基础(六) Matlab R2015b MDCE分布式计算环境搭建
环境:ubuntu desktop 14.04.04 x64jdk 1.7安装步骤如下:参考:http://www.jianshu.com/p/f0cefc737dda1.sudo mkdir -p /mnt/tmpsudo mount -t iso9660 -o loop /server/matlab/R2015b_glnxa64.iso /mnt/tmp2.cd
2016-07-25 21:50:21
5051
原创 大数据基础(五)从零开始安装配置Hadoop 2.7.2+Spark 2.0.0到Ubuntu 16.04
从零开始安装配置Hadoop 2.7.2+Spark 1.6.20 install ubuntu 14.04.01 desktop x641 system基础配置《以下都是root模式》1.3 root passwordsudo passwd root1.5 root登录选项a.在terminal下输入:vi /usr/share/lightdm
2016-07-25 21:43:56
6260
原创 大数据爬虫基础(三)Scrapy在Windows 10下的安装
环境:Windows 10 x64Anaconda python 2.7.121、依赖包的安装Scrapy依赖项的安装Scrapy的依赖项可以在这里进行下载:http://pan.baidu.com/s/13oRlq安装lxml-3.2.4.win32-py2.7.exe(64位系统需要安装lxml-3.2.4.win-amd64-py2.7.exe)安装pywin
2016-07-11 16:15:06
1535
原创 大数据爬虫基础(四)MAVEN的安装配置和使用(下)--JAVA简单爬虫
eclipse maven环境:windows 10pro x64 jdk1.8 eclipse mars1、安装设置maven插件window->preferences->Installations->Add具体见下边的参考链接一2、新建maven projectFile->new project->maven project->maven-archetype-qui
2016-06-10 16:26:53
1327
原创 大数据爬虫基础(三) MAVEN的安装配置和使用(上)
环境:ubuntu server 14.04.04 amd64 jdk1.81. 安装:http://www.jikexueyuan.com/course/571_4.html?ss=1下载、解压、M2_HOME、PATHmvn -version2. 使用http://www.jikexueyuan.com/course/maven/2.1 java
2016-06-10 14:44:07
1041
原创 大数据基础(四)Ubuntu sbt安装和Spark下的使用
Ubuntu sbt安装和Spark下的使用环境:ubuntu server 14.04.04 amd64,hadoop2.6.2,scala 2.11.7,sbt 0.13.11,jdk 1.8一、安装方法一:下载tgz压缩包1 下载root@spark:~# wget https://dl.bintray.com/sbt/native-packages/sbt/
2016-06-10 12:00:51
6238
原创 大数据基础(三)Ubuntu下基于Hadoop 2.6.2的Mahout 0.12.1安装和使用
Ubuntu下基于Hadoop 2.6.2的Mahout 0.12.1安装和使用环境:Ubuntu Server 14.04.04 amd64 Hadoop 2.6.2 参考:http://itindex.net/detail/49323-mahout-%E5%AD%A6%E4%B9%A0-mahout新版的配置有略微改动1、下载http://mirror.bi
2016-06-04 14:01:21
3274
原创 大数据爬虫基础(二)Redis在ubuntu 14.04.03下安装
Redis安装环境:ubuntu 14.04.03 amd64 python 2.7.10参考:http://www.360doc.com/content/14/1021/16/3200886_418709516.shtml下载:http://www.redis.io/downloadhttp://download.redis.io/releases/redis-3
2016-05-19 18:01:31
626
原创 大数据爬虫基础(一)ubuntu anaconda安装
ubuntu anaconda安装环境:ubuntu server 14.04.03 python 2.7.111、下载:https://www.continuum.io/downloads#_unixwget http://repo.continuum.io/archive/Anaconda2-4.0.0-Linux-x86_64.sh2、安装https:
2016-05-16 09:56:59
5536
原创 大数据基础(二)hadoop, mave, hbase, hive, sqoop在ubuntu 14.04.04下的安装和sqoop与hdfs,hive,mysql导入导出
mave, hbase, hive, sqoop在hadoop2.6 ubuntu 14.04.04下的安装2016.05.15本文测试环境:hadoop2.6.2 ubuntu 14.04.04 amd64 jdk1.8另外,本文参考了一些文章,基本上都有原文链接。前提:hadoop安装:参考:http://blog.youkuaiyun.com/xanxus46/article
2016-05-15 21:10:59
2046
原创 数据挖掘环境配置(一)JDK在ubuntu 16.04下的安装配置
jdk在ubuntu 16.04下的安装1、下载jdkjdk-8u91-linux-x64.tar.gzhttp://download.oracle.com/otn-pub/java/jdk/8u91-b14/jdk-8u91-linux-x64.tar.gz?AuthParam=1461460538_c9fec92cd12aba54d9b6cdefeb14a986
2016-04-24 09:22:53
3435
原创 大数据爬虫基础(三)Scrapy在ubuntu 16.04下的安装
Scrapy ubuntu下安装系统:ubuntu 16.04 no gui依赖包及依赖包的依赖包:下列的安装步骤假定您已经安装好下列程序:http://scrapy.org/Python 2.7Python Package: pip and setuptools. 现在 pip 依赖 setuptools ,如果未安装,则会自动安装 setuptools 。l
2016-04-24 09:07:52
4303
原创 大数据基础(一)openmpi,mpich,mpi4py在ubuntu 16.04下的安装指南
安装mpi4py的方法直接pip install mpi4py不可取。需要安装以下依赖包:https://bitbucket.org/mpi4py/mpi4py/srcDependenciesPython 2.6, 2.7, 3.2 or above, or PyPy 2.0 or above.A functional MPI 1.x/2.x/3.x impleme
2016-04-17 00:20:36
7458
转载 数据挖掘算法(一)提高文本分类算法准确率和性能的10条建议
10 Tips to Improve your Text Classification Algorithm Accuracy and Performance1.Eliminate Low Quality Features (Words)2.Recursively Grow your Stopword List3.Look Beyond Unigram int
2016-04-16 08:24:12
4664
chromium-win-93.0.4563.0.zip
2021-07-01
chromium-win64-93.0.4563.0.zip
2021-07-01
2020年中国网络文学版权保护研究报告
2020-06-25
勾陈一—2020年卫星导航行业研究报告
2020-06-25
美妆行业细分用户洞察报告
2020-06-25
MCN行业洞察及合作机遇
2020-06-25
QuestMobile:2020新国货崛起洞察报告
2020-06-25
QuestMobile:2020儿童经济洞察报告
2020-06-25
GWI:2020社交媒体趋势报告
2020-06-25
群邑电商:2020年618洞察
2020-06-25
人工智能之人机交互报告
2020-06-25
赛迪智库:中国独角兽企业发展白皮书
2020-06-07
QuestMobile:2020移动互联网全景生态报告
2020-06-07
NPR:2020年智能音频报告
2020-06-07
2020年中国疫情时期网络长视频内容价值回顾及探索
2020-06-07
2020年中国公共充电桩行业研究报告
2020-06-07
2020年国外卫星通信企业破产分析报告
2020-06-07
湖光秋月两相和—2020年5G+云VR研究报告.pdf
2020-05-23
QuestMobile2020中国互联网广告大报告(下篇).pdf
2020-05-23
2020年中国IT基础架构运维市场研究报告.pdf
2020-05-23
麦肯锡:疫情之下:中国消费者的四大趋势性变化.pdf
2020-05-23
QuestMobile:2020美妆人群与品牌洞察报告.pdf
2020-05-23
【数说故事】2020年美妆国货新趋势.pdf
2020-05-23
赛迪智库:“新基建”政策白皮书
2020-05-10
2020年中国电竞行业研究报告
2020-05-10
2020年中国企业服务研究报告
2020-05-10
QuestMobile:2020中国互联网广告大报告(上篇)
2020-05-10
工业互联网产业联盟:工业智能白皮书
2020-05-10
联合国:2019年工业组织发展报告
2020-05-10
麦肯锡:客户眼中的银行体验
2020-04-25
QuestMobile:2020中国移动互联网春季大报告
2020-04-25
QuestMobile:2020年Q1移动互联网黑马榜
2020-04-25
华泰人工智能系列之三十:从关联到逻辑:因果推断初探
2020-04-25
TalkingData:2019移动广告行业报告
2020-04-25
赛迪智库:我国各省区市“新基建”发展潜力白皮书
2020-04-25
赛迪:“新基建”政策白皮书
2020-04-25
艾瑞咨询:2020年中国网络营销投放监测系列报告
2020-04-25
艾瑞咨询:留存与未来 - 疫情背后的互联网产业发展趋势报告
2020-04-25
艾瑞咨询:2020年中国电商营销市场研究报告
2020-04-25
艾瑞咨询:2020年中国专有云行业发展洞察
2020-04-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人