- 博客(23)
- 资源 (13)
- 收藏
- 关注
原创 sparksql插入postgresql 字段格式不匹配报错处理
1、错误关键信息Caused by: org.postgresql.util.PSQLException: ERROR: column "c1" is of type point but expression is of type character at org.postgresql.core.v3.QueryExecutorImpl.receiveErrorResponse(QueryExecutorImpl.java:2553) at org.postgresql.core.v3.Que..
2021-07-12 16:51:10
4185
原创 webflux excel文件上传:java.io.IOException: Unable to read entire header; 0 bytes read; expected 512 byte
webflux excel文件上传报错:java.io.IOException: Unable to read entire header; 275 bytes read; expected 512 bytes报错代码: @PostMapping(value = "read/excel", consumes = MediaType.MULTIPART_FORM_DATA_VALUE) public ResponseEntity<?> uploadFile( @Api.
2021-04-09 12:00:04
1530
1
原创 js重写alert事件,避免alert弹框标题出现网址
js代码:window.alert = function(msg, callback) { var div = document.createElement("div"); div.innerHTML = "" + ".nbaMask { position: fixed; z-index: 1000; top: 0; right: 0; left: 0; bottom: 0; bac
2017-01-13 10:29:04
31047
原创 JPA(Hibernate4)+Spring4 延迟加载问题
org.hibernate.LazyInitializationException: failed to lazily initialize a collection of role: org.ssh.model.Area.areas, could not initialize proxy - no Sessions at org.hibernate.collection.internal.AbstractPersistentCollection.throwLazyInitializationExc
2015-11-01 21:40:20
850
转载 Win7 Eclipse调试Centos Hadoop2.2-Mapreduce
原文地址:http://zy19982004.iteye.com/blog/2024467 一.自己搭建开发环境 今天自己搭建了一套Centos5.3 + Hadoop2.2 + Hbase0.96.1.1的开发环境,Win7 Eclipse调试MapReduce成功。可能是版本比较高的原因,出了问题,网上找不到完整解决方案,只能靠自己。 二.Hadoo
2014-04-14 17:00:53
1998
转载 CentOS(Linux)下的apache服务器配置与管理方法分享
一、WEB服务器与Apache 1、web服务器与网址 2、Apache的历史 3、补充 http://www.netcraft.com/可以查看apache服务器的市场占有率同时必须注意的是ngnix,正处于强势增长的上升时期,大有和apache一争天下的感觉,真是后生可畏~~~ 二、Apache服务器的管理命令 1、命令启动:service httpd star
2014-04-09 17:07:12
802
转载 hadoop机架感知
我们知道hadoop集群具有容错性,分布式等特点,为什么会具有这些特点,下面是其中原理之一。分布式的集群通常包含非常多的机器,由于受到机架槽位和交换机网口的限制,通常大型的分布式集群都会跨好几个机架,由多个机架上的机器共同组成一个分布式集群。机架内的机器之间的网络速度通常都会高于跨机架机器之间的网络速度,并且机架之间机器的网络通信通常受到上层交换机间网络带宽的限制。 具体到H
2014-04-03 20:53:28
843
转载 awk手册
1. 前言有关本手册 :这是一本awk学习指引, 其重点着重于 :l awk 适于解决哪些问题 ?l awk 常见的解题模式为何 ?为使读者快速掌握awk解题的模式及特性, 本手册系由一些较具代表性的范例及其题解所构成; 各范例由浅入深, 彼此间相互连贯,范例中并对所使用的awk语法及指令辅以必要的说明. 有关awk的指令, 函数,...等条列式的说
2014-04-02 20:29:44
750
转载 常用awk命令
原文地址:http://www.cnblogs.com/repository/archive/2011/05/13/2045927.htmlawk 用法:awk ' pattern {action} ' 变量名 含义 ARGC 命令行变元个数 ARGV 命令行变元数组 FILENAME 当前输入文件名 FNR 当前文件中的记录号 FS 输入域分隔符,默认为一个
2014-04-02 20:24:21
566
转载 linux sort,uniq,cut,wc命令详解
sortsort 命令对 File 参数指定的文件中的行排序,并将结果写到标准输出。如果 File 参数指定多个文件,那么 sort 命令将这些文件连接起来,并当作一个文件进行排序。sort语法[root@www ~]# sort [-fbMnrtuk] [file or stdin]选项与参数:-f :忽略大小写的差异,例如 A 与 a 视为编码相同;-b
2014-04-02 20:22:17
801
转载 linux awk编程入门
简介转载自:http://www.cnblogs.com/ggjucheng/archive/2013/01/13/2858470.htmlawk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大。简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。awk有3个不同版本
2014-04-02 20:17:16
679
转载 hbase过滤器
base过滤器的比较操作符:LESS LESS_OR_EQUAL EQUAL =NOT_EQUAL GREATER_OR_EQUAL >=GREATER >NO_OP no operation比较器:BinaryComparator 按字节索引顺序比较指定字节数组,采用Bytes.compareTo(byte[])
2014-03-30 22:44:46
885
转载 部署Hadoop集群的步骤
1. Hadoop的三种集群搭建方式Hadoop支持以下三种模式的Hadoop集群:(1) 单机模式相当于没有HDFS文件系统,只是支持MapReduce(2) 伪分布式模式相当于只有一个节点的集群。主从节点都位于同一主机,从MapReduce层面来看,也就是Jobtracker与TaskTracker位于同一节点;从文件系统的角度来看,也就是NameN
2014-03-30 08:36:26
1597
转载 Hive函数大全
目录一、关系运算:...41. 等值比较: =.42. 不等值比较: .43. 小于比较: .44. 小于等于比较: .45. 大于比较: >.56. 大于等于比较: >=.57. 空值判断: IS NULL.58. 非空判断: IS NOT NULL.69. LIKE比较: LIKE.610. JAVA的LIKE操作: RLIKE.611. REG
2014-03-28 11:40:28
2279
原创 java构建简单的ftp服务
服务端代码:package examples.ftp;import java.io.File;import java.io.FileInputStream;import java.io.IOException;import java.io.InputStream;import java.io.OutputStream;import java.net.ServerSo
2014-03-28 10:46:43
919
原创 java验证公民身份证真实性
通过一定的算法规则校验身份证的真实性,不多说,上代码:package examples.cardId;import java.util.Scanner;/** * 公民身份号码是特征组合码,由十七位数字本体码和一位数字校验码组成.排列顺序从左至右依次为: * * 六位数字地址码,八位数字出生日期码,三位数字顺序码和一位数字校验码。 * * 1、地
2014-03-28 10:29:02
2092
转载 Java解析XML的四种方法
XML现在已经成为一种通用的数据交换格式,它的平台无关性,语言无关性,系统无关性,给数据集成与交互带来了极大的方便。对于XML本身的语法知识与技术细节,需要阅读相关的技术文献,这里面包括的内容有DOM(Document Object Model),DTD(Document Type Definition),SAX(SimpleAPI for XML),XSD(Xml Schema Defini
2014-03-28 10:08:47
617
转载 深入理解HBase Memstore
MemStore是HBase非常重要的组成部分,深入理解MemStore的运行机制、工作原理、相关配置,对HBase集群管理以及性能调优有非常重要的帮助。HBase Memstore首先通过简单介绍HBase的读写过程来理解一下MemStore到底是什么,在何处发挥作用,如何使用到以及为什么要用MemStore。图一:Memstore Usage in HBase Read/Wri
2014-03-25 18:22:34
637
转载 MapReduce生成HFile入库到HBase
一、这种方式有很多的优点:1. 如果我们一次性入库hbase巨量数据,处理速度慢不说,还特别占用Region资源, 一个比较高效便捷的方法就是使用 “Bulk Loading”方法,即HBase提供的HFileOutputFormat类。2. 它是利用hbase的数据信息按照特定格式存储在hdfs内这一原理,直接生成这种hdfs内存储的数据格式文件,然后上传至合适位置,即完成巨量数据快速入
2014-03-25 18:19:40
640
转载 HBase Multi-Master设置
为了保证HBase集群的高可靠性,HBase支持多Backup Master 设置。当Active Master挂掉后,Backup Master可以自动接管整个HBase的集群。该配置极其简单:在$HBASE_HOME/conf/ 目录下新增文件配置backup-masters,在其内添加要用做Backup Master的节点hostname。如下:[root@master]$ ca
2014-03-25 18:16:40
851
转载 HBase修改压缩格式及Snappy压缩实测分享
一、要点有关Snappy的相关介绍可参看Hadoop压缩-SNAPPY算法,如果想安装Snappy,可以参看Hadoop HBase 配置 安装 Snappy 终极教程。1. HBase修改Table压缩格式步骤2. 实测结果分享二、HBase修改Table压缩格式步骤修改HBase压缩算法很简单,只需要如下几步:1. hbase shell命令下,disable相关表
2014-03-25 18:14:06
907
转载 HBase建表的同时建分区
使用HBase Shell建表的时候,除了一些常用的option以外,我们还可以同时建立一些预分区,这样可以预防初次插入数据时热点问题。通过直接输入create,我们可以看到有如下提示:?123456789101112Examples: hbase> create't1', {NAME
2014-03-25 18:11:56
1334
转载 Hadoop对于压缩文件的支持及算法优缺点
Hadoop对于压缩格式的是透明识别,我们的MapReduce任务的执行是透明的,hadoop能够自动为我们 将压缩的文件解压,而不用我们去关心。 如果我们压缩的文件有相应压缩格式的扩展名(比如lzo,gz,bzip2等),hadoop就会根据扩展名去选择解码器解压。压缩格式 工具 算法 文件扩展名 多文件 可分割性 DEFLATE 无 DEFLATE .deflate 不 不
2014-03-25 18:04:57
1435
jbosstools-4.15.0.Final-updatesite-core.zip
2020-07-05
springsource-tool-suite-3.9.13.RELEASE-e4.16.0-updatesite.zip
2020-07-05
spring boot + plupload实现大文件断点续传
2017-10-18
fckeditor java经典配置使用demo
2015-03-07
ExtJS Web应用程序开发指南(第2版)
2013-08-28
Ext中文API
2013-08-28
Ext中文文档
2013-08-28
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人