- 博客(11)
- 资源 (17)
- 收藏
- 关注
RSS订阅原创 sparksql读取hbase
test("hbase") { val sqlContext = SparkSession.builder().getOrCreate().sqlContext //拉取hbase数据 val hBaseConfiguration = HBaseConfiguration.create() hBaseConfiguration.set(TableInputFormat.INPUT...
2018-08-08 19:46:14
1760
原创 newAPIHadoopRDD
import org.apache.hadoop.hbase.HBaseConfigurationimport org.apache.hadoop.hbase.client.{ConnectionFactory, Result}import org.apache.hadoop.hbase.io.ImmutableBytesWritableimport org.apache.hadoop.h...
2018-07-31 09:50:30
6643
1
原创 centos7安装cdh5
一．Ip配置设置IP地址、网关DNS 说明：CentOS 7.0默认安装好之后是没有自动开启网络连接的！ cd /etc/sysconfig/network-scripts/ #进入网络配置文件目录 vi ifcfg-eno16777736 #编辑配置文件，添加修改以下内容 HWADDR=00:0C:29:8D:24:73 TYPE=Ethernet BOO
2017-10-09 08:47:08
887
原创 hive,hbase命令行无法回格
在secureCRT中，点击"选项"->"回话选项"->"终端"->"仿真"右边的终端选择linux，在hbase shell中如输入出错，Ctrl+回格键即可删除
2017-09-30 11:38:22
700
1
原创 linux下ftp命令调用外部变量传送文件
1.首先确定目标服务器安装了vsftpd服务，没有该服务可以用yum安装yum install vsftpd2.开启目标服务器ftp服务service vsftpd start设置开机自启chkconfig vsftpd on3.本地服务器测试连接，连接不上尝试关闭目标服务器的防火墙4.开始写命令dis1=192.168.1.2 #目标服务器myuser=
2017-09-26 11:19:29
2197
原创 centos安装redis
一.下载资源(1.)redis官网地址：http://www.redis.io/(2.)下载源码，解压缩后编译源码。wget http://download.redis.io/releases/redis-2.8.3.tar.gz无wget命令,从yum源安装:yum install wget(3.)解压文件tar -zxvf redis-2.8.3.tar.gz(
2017-08-28 16:25:30
239
原创 linux mysql yum安装
一.将repos源放在/etc/yum.repos.d目录下(1.)安装源下载源:https://dev.mysql.com/downloads/repo/yum/rpm -ivh mysql57-community-release-el6-n.noarch.rpm安装完成后会出现两个.repo:mysql-community.repo mysql-community-source.repo(2....
2017-08-24 12:00:56
258
原创 windows下配置mysql主从备份
一.原理1.MYSQL主从同步是在MySQL主从复制（Master-Slave Replication）基础上实现的，通过设置在Master上的binlog，使其处于打开状态；Slave通过一个I/O线程从Master上读取binlog，然后传输到Slave的中继日志中，然后使用SQL线程读取中继日志，并应用到自身数据库中，从而实现主从数据同步功能二.主服务器配置(1.
2017-08-22 10:01:03
751
转载 正则表达式
评注：匹配中文还真是个头疼的事，有了这个表达式就好办了匹配双字节字符(包括汉字在内)：[^x00-xff]评注：可以用来计算字符串的长度（一个双字节字符长度计2，ASCII字符计1）匹配空白行的正则表达式：ns*r评注：可以用来删除空白行匹配HTML标记的正则表达式：]*>.*?|评注：网上流传的版本太糟糕，上面这个也仅仅能匹配部分，对于复杂的嵌套标记依旧无能为力匹
2017-08-11 18:06:15
181
原创 request请求https时禁用安全请求警告
def getPhoneLocatin(): match=re.compile(ur".*?province:'(.*?)'.*") temp=[] for phone in loadData(): realphone=phone if len(str(phone).strip())>11: phone=str(pho
2017-07-27 19:14:12
2685
原创 python连接mongodb密码认证
from pymongo import MongoClient#建立和数据库系统的连接,指定host及port参数client = MongoClient('localhost', 27017)#连接mydb数据库,账号密码认证db = client.mydbdb.authenticate("account", "password")#连接表collection = d
2017-05-08 17:13:46
17412
Ruby 从入门到精通
2018-07-01
scala程序设计第2版
2017-10-02
JDK1.8中文版本
2017-09-19
scala编译器
2017-09-09
MySQL从入门到精通.pdf
2017-03-18
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人