- 博客(15)
- 问答 (1)
- 收藏
- 关注
原创 启动hive错误:Exception in thread "main" java.lang.IllegalArgumentException
启动hive时报错了报错信息:Exception in thread "main" java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name...
2018-03-20 15:19:07
5910
2
原创 HDFS写数据流程
HDFS写数据流程概述客户端要向HDFS写数据,首先要跟namenode通信以确认可以写文件并获得接收文件block的datanode,然后,客户端按顺序将文件逐个block传递给相应datanode,并由接收到block的datanode负责向其他datanode复制block的副本步骤图详细过程客户端执行写入操作DistributedFileSyste...
2018-03-20 13:21:55
1211
原创 HDFS的Java操作
HDFS的Java操作 HDFS在生产应用中主要是客户端的开发,其核心步骤是从HDFS提供的API中构造一个HDFS的访问客户端对象,然后通过该客户端对象操作(增删改查)HDFS上的文件搭建开发环境开发工具:IDEA 管理工具:Maven JDK:1.8 Hadoop:2.7.4建议在Linux/Unix下进行hadoop应用的开发,不会存在兼容性问题。如在wind...
2018-03-19 18:31:44
525
原创 HDFS基本概念及基本操作
HDFS基本概念篇 1. HDFS 前言设计思想: 分而治之: 将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析。在大数据系统中作用: 为各类分布式运算框架(如:mapreduce,spark,tez,……)提供数据存储服务。 重点概念: 文件切块,副本存放,元数据2. HDFS的概念和特性首先,它是一个文件系统,...
2018-03-17 12:18:24
765
转载 C# AES 加密解密
高级加密标准(AES,Advanced Encryption Standard)为最常见的对称加密算法(微信小程序加密传输就是用这个加密算法的)。对称加密算法也就是加密和解密用相同的密钥
2017-08-07 16:12:31
1909
原创 Ubuntu 16.04安装Mysql和安装时出现错误解决
安装MySQL过程中出错,部分内容如下:update-alternatives: 使用 /etc/mysql/mysql.cnf 来在自动模式中提供 /etc/mysql/my.cnf (my.cnf)Renaming removed key_buffer and myisam-recover options (if present)Job for mysql.service failed be
2017-07-13 18:54:21
6022
4
原创 ASM ClassReader failed to parse class file
ASM ClassReader failed to parse class file - probably due to a new Java class file version that isn’t supported yet:运行了下之前的项目报了这个异常。 无法读取候选组件类:嵌套异常是org.springframework.core.NestedIOException:ASM Class
2017-07-11 11:16:28
2396
原创 Java计算两个日期间的年,月,日之差
由于在开发中需要计算车的使用年限,我当时使用的是以下方案并记录下来,希望能给有需要计算日期差的朋友有所帮助。当然,中间的计算逻辑根据不同要求来计算。
2017-06-17 10:13:20
5645
转载 Java解析图片
由于开发中经常会遇到解析验证码图片字符串,所以把这篇文章给记录了下来。import java.io.FileInputStream;import java.io.FileOutputStream;import java.io.IOException;import java.io.InputStream;import java.io.OutputStream;import sun.misc.
2017-06-16 18:36:03
8301
1
原创 JAVA单例Map缓存
package com.xxx.util;import java.util.Enumeration;import java.util.HashMap;import java.util.Hashtable;import java.util.Map;/** * 该类用于缓存工作 * */public final class SimpleCache { private stat
2017-06-16 18:24:13
3063
原创 使用Java反射创建XML
/*** 将对象属性名作为节点,属性值作为节点值* * @param rootName* 根节点对象* @param eleName* 要创建的字节点名称* @param obj* 被取值的对象*/public static void createXml(Element rootName, S
2017-05-26 17:00:15
413
原创 使用JDK自带HttpsURLConnection发送HTTPS请求
public static String sendSoapXml(String xml, String requestUrl) throws Exception {System.out.println("请求报文:" + xml);StringBuffer sb = new StringBuffer();String u = requestUrl;// 请求发送前给
2017-05-26 16:51:51
1539
转载 Java对象XML
private String beanToStringXml(Object obj) {String xmlStr = null;if (obj == null) {return "";}try {JAXBContext jaxbContext = JAXBContext.newInstance(obj.getClass());Marshal
2017-05-26 16:47:24
381
原创 使用Apache提供的HttpClient发送https请求
/*** * @param sendXml* 需要发送的报文字符串* @param requestUrl* 请求url地址* @return 响应报文字符串*/public static String sendSOAP(String sendXml, String requestUrl) {String respons
2017-05-26 16:42:31
896
空空如也
获取打印机数据保存到文件
2017-12-05
TA创建的收藏夹 TA关注的收藏夹
TA关注的人