- 博客(15)
- 收藏
- 关注
转载 java - ZipInputStream.getNextEntry() 是如何工作的?
关于Java ZipInputStream类下getNextEntry方法的介绍
2023-03-04 21:50:05
2062
原创 SLF4J和Logback
SLF4JCommons Logging和Log4j是一对好基友,它们一个负责充当日志API,一个负责实现日志底层,搭配使用非常便于开发。有的童鞋可能还听说过SLF4J和Logback。这两个东东看上去也像日志,它们又是啥?其实SLF4J类似于Commons Logging,也是一个日志接口,而Logback类似于Log4j,是一个日志的实现。为什么有了Commons Logging和Log4j,又会蹦出来SLF4J和Logback?这是因为Java有着非常悠久的开源历史,不但OpenJDK本身是开
2020-06-24 17:04:16
176
原创 04 .HIVESQL之Hive Serde (利用正则处理复杂的数据加载)
Hive正则匹配create table table_name(id int,name string,identity string,t_user string,request string,agent string)row format serde ‘org.apache.hadoop.hive.serde2.RegexSerDe’with serdeproperties (“input.regex”="//这里写正则表达式")stored as textfile;...
2020-05-27 11:33:49
299
转载 DataNode
Namenode恢复后DataNode起不来启动hadoop 发现 50070 的 livenode 数量是 0 查看日志, hdfs.server.datanode.DataNode: Block pool ID needed, but service not yet registered with NN删除 dfs 的 data, 因为里 current 文件datanode I...
2020-05-08 16:24:33
281
转载 NameNode相关
namenode元数据被破坏java.io.IOException: There appears to be a gap in the edit log. We expected txid 1, but got txid 16.namenode进程中出现如下报错信息原因:namenode元数据被破坏,需要修复解决:恢复一下namenodehadoop namenode -recover...
2020-05-08 16:22:05
173
原创 Flume总结
Flume简介Flume提供一个分布式的,可靠的,对大数据量的日志进行高效收集、聚集、移动的服务,Flume只能在Unix环境下运行。Flume基于流式架构,容错性强,也很灵活简单。Flume、Kafka用来实时进行数据收集,Spark、Flink用来实时处理数据,impala用来实时查询。Flume官网:flume.apache.orgFlume角色Source用于采集数据,...
2020-04-23 22:56:47
228
原创 Liunx内配置Java、Hadoop
1.进入 /etc/profile1)shift+G进入到尾行2)输入export JAVA_HOME=/JAVA安装目录export PATH=$JAVA_HOME/bin:$PATHexport JAVA_HOME=/hadoop安装目录export PATH=$JAVA_HOME/bin:$PATH
2020-03-03 19:32:51
112
原创 HDFS基础与操作
HDFS基础与操作1. HDFS概念概念HDFS,它是一个文件系统**,全称:Hadoop Distributed File System,用于存储文件通过目录树来定位文件;**其次,它是分布式的文件存储系统,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。组成HDFS集群包括,NameNode和DataNode以及Secondary Namenode。NameNo...
2020-01-08 23:41:37
187
原创 大数据技术之Hadoop(入门介绍,内含配置完全分布式教程)
大数据技术之Hadoop(入门)1. 大数据概论2. 从Hadoop框架讨论大数据生态名字起源该项目的创建者,Doug Cutting解释Hadoop的得名 :“这个名字是我孩子给一个棕黄色的大象玩具命名的项目起源Hadoop由 Apache Software Foundation 公司于 2005 年秋天作为Lucene的子项目Nutch的一部分正式引入。它受到最先由 Google...
2020-01-07 20:48:32
460
原创 Winform窗体操作
知识点1:Winfrom 窗体热键要设置控件的热键,使用窗体的KeyDown事件 ;要设置窗体的热键,使用窗体的KeyDown事件,并将窗体的KeypreView属性(确定窗体上控件的键盘事件是否已向窗体注册)知识点2:Winfrom窗体传值 A窗体的值传入B窗体1.创建静态类class A{public static string name;}A窗体赋值A...
2020-01-07 19:56:44
228
原创 String成员方法
boolean equals(Object obj):判断字符串的内容是否相同,区分大小写。boolean equalsIgnoreCase(String str):判断字符串的内容是否相同,不区分大小写。boolean contains(String str):判断字符串对象是否包含给定的字符串。boolean startsWith(String str):判断字符串对象是否以给定的字符串开始。...
2018-03-23 19:21:27
459
转载 Java里的数据类型
转自----百度知道int 四字节没错 byte一字节也没错但一个字节有8位哦! 先看byte,byte占一字节,一字节等于八位我们来看看一个位能表示多少东西: 最小0 最大1 表示 2的1次方再看看两个位能表示多少东西: 最小00 最大11 共2的2次方, 能表达四个数再看看三个位能表示多少东西: 最小000 最大111 共2的3次方,能表达8个数那八个位能表示多少?最小:00000000 最...
2018-03-16 09:25:02
151
原创 403.14错误提示
HTTP错误 403.14 服务器配置为不列出此目录内容 如果是在本机配置,大部分情况下问题都是出在IIS上打开IIS管理器 打开配置的网站,然后选择子窗体下的目录浏览启用目录浏览第二种方法:双击Web.config,在里面<configuration>和</configuration>中间添加几句话,启用目录浏览。<system.webServer><d...
2018-02-09 23:07:20
404
原创 ASP.NET画板
在ashx(一般处理程序页面)里使用画板输出Hello Word,背景色为灰色,字体为红色 源代码如下:context.Response.ContentType="text/html"; //给用户创建一张图片,并且把这张图片保存 //创建一个画布using(Bitmap map=new Bitmap(300,400){ //给画布创建一个画笔 ...
2018-02-09 20:27:50
487
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人