- 博客(9)
- 收藏
- 关注
原创 常用正则表达式总结
非负整数:^\d+$ 正整数:1[1-9][0-9]$ 非正整数:^((-\d+)|(0+))$ 负整数:^-[0-9][1-9][0-9]$ 整数:^-?\d+$ 非负浮点数:^\d+(.\d+)?$ 正浮点数 : ^((0-9)+.[0-9][1-9][0-9])|([0-9][1-9][0-9].[0-9]+)|([0-9][1-9][0-9])$ 非正浮点数:^((-\d+.\d+)?)|...
2019-06-26 10:15:15
212
原创 python正则表达式
正则表达式: 正则表达式测试工具,创建 一个正则表达式后,需要测试该正则表达式是否正确,使用正则表达式测试工具"Notepad++"来测试正则表达式。 操作步骤:打开"Notepad++“软件,点击"搜索"菜单下的查找,在弹出的对话框的左下角"查找模式"选项里点选"正则表达式”, 在正上方的输入文本框里输入正则表达式即可搜索匹配的字符串了。 正则表达式 - 符号 号代表前面的字符必须至少出现一次...
2019-06-12 11:26:23
110
原创 apache的日志access_log分析
下面是访问日志中一个典型的记录: 180.76.15.146 - e800 [19/Mar/2015:13:24:22 +0800] “GET /stats/awstats.pl?config=e800 HTTP/1.1” 200 899 “http://180.76.15.1/pv/” “Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; Max...
2019-05-31 10:51:14
780
原创 Zookeeper笔记
Zookeeper概念简介: Zookeeper是一个分布式协调服务;就是为用户的分布式应用程序提供协调服务 A、zookeeper是为别的分布式程序服务的 B、Zookeeper本身就是一个分布式程序(只要有半数以上节点存活,zk就能正常服务) C、Zookeeper所提供的服务涵盖:主从协调、服务器节点动态上下线、统一配置管理、分布式共享锁、统一名称服务…… D、虽然说可以提供各种服务,但是...
2019-04-09 09:35:19
197
原创 HBase详解
HBase简介 1.1. 什么是hbase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBASE的目标是存储并处理大型的数据,更具体来说是仅需使用普通的硬件配置,就能够处理由成千上万的行和列所组成的大型数据。 HBASE是Google Bigtable的开源实现,但是也有很多不同之处。比如:Goo...
2019-04-09 09:10:26
279
原创 Spark RDD
目标 1.1. 熟练使用RDD的算子完成计算 1.2. 掌握RDD的原理 弹性分布式数据集RDD 2.1. RDD概述 2.1.1. 什么是RDD RDD(Resilient Distributed Dataset)叫做分布式数据集,是Spark中最基本的数据抽象,它代表一个不可变、可分区、里面的元素可并行计算的集合。RDD具有数据流模型的特点:自动容错、位置感知性调度和可伸缩性。R...
2019-04-01 14:06:36
128
原创 HDFS常用操作命令
启动hdfs #start-all.sh 查看hdfs的配置文件 #cat hdfs-site.sh #hadoop fs -put /soft/jdk / #HDFS上传文件命令 查看上传后的文件属性 #hadoop fs -ls / 进入存放datanode的block目录,然后列出block列表信息 #cd /opt/modules/hadoop-2.6.0/tmp/dfs/data/cur...
2019-04-01 14:05:33
277
原创 Hive常用操作命令
创建数据库 create database db_name; create database if not exists db_name;//创建一个不存在的数据库final 查看数据库 show databases; 选择性查看数据库 show databases like ‘f.*’; 查看某一个数据库的详细信息 describe database db_name; 删除非空数据库 drop...
2019-04-01 14:04:30
249
原创 大数据
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Ma...
2019-02-20 13:21:43
116
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人