- 博客(26)
- 资源 (9)
- 问答 (1)
- 收藏
- 关注
原创 Python3 安装软件出现 cl.exe failed with exit status 2 错误
Python3 安装软件出现 cl.exe failed with exit status 2 错误问题解决
2022-09-26 15:40:41
8351
1
原创 VMWARE NAT模式下虚拟机集群节点无法连接外网问题解决
VMVare三种网络模式: http://www.cnblogs.com/gylei/archive/2011/12/10/2283484.html NAT:可能出现本机和虚拟机不在一个网段,因为进行了网络地址转换。 桥接:可以保证一个网段。NAT模式下虚拟机经常容易出现无法连接外网问题。解决办法如下:1.首先将VM的网卡net8启用:
2017-08-01 18:29:50
3415
2
转载 How to force STORE (overwrite) to HDFS in Pig?
问题: Pig Grunt 中,fs -rmr /apps/hive/warehouse/tmp_test 可以正常运行直接运行pig -param_file/home/hive/sample.params /home/hive/preprocess.pig ,如果已经有/apps/hive/warehouse/tmp_test 文件存在,会报错;2012-06-19 19:22:
2017-03-02 17:54:07
1001
原创 HIVE中使用python实现UDF
参考:http://www.4wei.cn/archives/1002357Python UDF HIVE,FACEBOOK的一个开源项目,利用类SQL的语句(HiveQL)来加快一般的MapReduce的开发过程。UDF,user defined function, 因为HIVE毕竟不是一般的关系型数据库,支持的HQL有限,如果要实现复杂的功能,就要通过自己定义函数来帮助实现。HIVE应该利用P...
2017-02-10 11:44:26
6685
转载 hive导入导出数据
Hive导出数据的方式:http://blog.youkuaiyun.com/niityzu/article/details/42238483Hive导入数据的方式:http://blog.youkuaiyun.com/niityzu/article/details/42234741Hive的高级应用:http://lxw1234.com/archives/2015/04/190.htm
2016-11-09 11:40:49
547
原创 hive两个聚合函数的计算结果拼接成表并做进一步计算
hive两个聚合函数的计算结果拼接成表让LZ头疼了很久,一度想到用python处理,或者新建两张临时表保存聚合函数的结果然后再取出数据进行计算,或者使用UDF, 但总觉得还有其他方法。经过一番探索,发现WITH AS 可以方便快捷解决此问题。WITH AS短语,也叫做子查询部分(subquery factoring),可以让你做很多事情,定义一个SQL片断,该SQL片断会被整个SQL语句所
2016-09-27 14:51:19
7752
原创 安装python Scipy时的坑
Python scipy库提供了真正的矩阵,以及大量的基于矩阵运算的对象与函数。机器学习模块Scikit-Learn就依赖于它,Numpy和metplorlib。Scipy依赖于Numpy, 安装之前必须先安装Numpy。安装环境:windows 1. 安装python在官网上下载python安装包,选择的是python 2.7.xhttps://www.python.or
2016-08-26 09:45:47
2885
原创 hive权限管理
环境:HDP2.4 ,hive-1.2.0, ambari统一管理目前hive支持简单的权限管理,默认情况下是不开启,这样所有的用户都具有相同的权限,同时也是超级管理员,也就对hive中的所有表都有查看和改动的权利,这样是不符合一般数据仓库的安全原则的。下面来介绍HIVE的权限管理。Hive用户1. Hive作为表存储层。 使用对象:Hive's HCatalog
2016-07-08 15:11:53
38617
1
原创 虚拟机安装Ambari和Hadoop相关服务
虚拟机中安装ambari和hadoop serviceshostname的几种修改方法VMWARE克隆出现的网络问题解决办法
2016-06-29 15:16:51
5322
1
原创 Win7中使用Eclipse连接虚拟机中的Ubuntu中的Hadoop2.7.1经验总结
本文的目的:Win7中使用Eclipse连接虚拟机中的Ubuntu中的Hadoop2.7版本:Hadoop2.7.1hadoop安装模式:伪分布式本文主要解决的问题:检查点:1. 配置文件是否正确,localhost是否需要替换成hadoop master的IP2. 集群是否启动3. 是否关闭防火墙4. hosts中主机名和地址是否映射5. 虚拟
2016-05-16 16:39:15
896
原创 如何手动安装VMware Tools? VMvare三种网络模式?
虚拟机启用复制和粘贴的方法;若虚拟机系统不支持与主机间复制粘贴,且已安装VMware Tools;请确认是否已启用复制和粘贴;单击“虚拟机”;单击“设置”;选择“选项”;选择“客户机隔离”;确认勾选“启用复制和粘贴”;单击“确定”;如果之前安装VMware时并没有完整版安装,则需要手动安装V
2016-05-05 15:35:12
4475
原创 websocket
WebSocket 是 HTML5 一种新的协议。它实现了浏览器与服务器全双工通信,能更好的节省服务器资源和带宽并达到实时通讯,它建立在 TCP 之上,同 HTTP 一样通过 TCP 来传输数据,但是它和 HTTP 最大不同是: WebSocket 是一种双向通信协议,在建立连接后,WebSocket 服务器和 Browser/Client Agent 都能主动的向对方发送或接收数
2016-04-27 11:41:35
395
原创 spring 在Thread中注入@Resource@Autowired失败,总为null~解决
参考:http://bailong139.blog.163.com/blog/static/2072381002014630114537506/背景: 我用@service或者@resposity声明了一个bean,给sping管理。现在我有个需求,就是用到Thread去监控,但是这个线程需要用我的service或者dao,然后我习惯性的在继承了Thread类或者实现了
2016-04-13 10:34:24
11913
3
转载 CSS 单行溢出文本显示省略号...的方法(兼容IE FF)(转)
表格中长文本处理,单行溢出文本显示省略号...鼠标滑过显示所有。http://www.cnblogs.com/hlz789456123/archive/2009/02/18/1392972.html
2016-04-06 15:39:23
546
原创 关于ajaxFileUpload只能上传一次的解决
今天用ajaxFileUpload做了一个上传文件到服务器的功能。出现问题:先上传了一次,后来发现读取完成以后,再上传的时候前台调试file和自动义参数都传进,但后台获取的仍然是上一次上传时的相关参数,必须要刷新页面才可以再次上传。原因:上查资料明确问题应该是ajaxFileUpload.js插件问题所致。网上解决办法:在ajaxFileUpload.js源码中找到:cre
2016-04-06 15:29:39
6175
原创 Hibernate事务系列问题
1.org.hibernate.TransactionException: JDBC begin transaction failed: org.hibernate.TransactionException: JDBC begin transaction failed: at org.hibernate.engine.transaction.internal.jdbc.JdbcTransa
2016-02-16 14:36:36
1080
原创 Jquery取得iframe子父元素互相操作的方法
Jquery取得iframe子父元素互相操作的方法1.在父页面给子页面内容赋值: $($("#swfiframe").contents().get(0)).find("#swfcate").val(data);2. Jquery取得iframe内部元素的方法 利用Jquery取得iframe中元素的几种方法 : $(document.getEleme
2016-01-12 11:05:19
1551
原创 Hibernate学习(1)
JPA常用注解请参考:http://1194867672-qq-com.iteye.com/blog/1730513下面根据经验谈谈Hibernate的一对多,多对一问题。(一)双向一对多的基本理解可参考:http://blog.youkuaiyun.com/lxl_family/article/details/26523757双向一对多关系,一是关系维护端(own
2015-11-13 17:15:49
439
原创 BoostrapTable表格
一、数据加载,前后台交互1. 直接html获取数据这样定义了表格结构,也把后台返回的数据通过EL表达式显示数据。 <table id="table" data-pagination="true" data-page-list="[5,
2015-11-12 17:00:48
1454
原创 JMeter&Badboy使用初步
JMeter是一款在国外非常流行和受欢迎的开源性能测试工具,像LoadRunner 一样,它也提供了一个利用本地Proxy Server(代理服务器)来录制生成测试脚本的功能,但是这个功能并不好用。所以在本文中介绍一个更为常用的方法——使用Badboy录制生成JMeter 脚本。
2015-09-21 18:37:46
3699
原创 Hadoop伪分布式部署和集群搭建
网上关于Hadoop集群搭建的资料非常多,一旦丰富就是鱼龙混杂,找不到好的资源会在环境搭建上浪费大量的时间。本文结合自己的亲身实践,推荐两篇比较有效的博客。集群搭建(非亲测)可参考:http://blog.youkuaiyun.com/sudaxhh/article/details/47133037伪分布式部署(亲测)很多人在本地安装了虚拟机,没有多台服务器资源可供使用,需
2015-08-10 15:37:03
1381
转载 Cookie V.S. Session
CookieCookie概述什么是Cookie 在HTTP中它表示服务器送给客户端浏览器的小甜点。其实Cookie就是一个键值对构成的,随着服务器端的响应发送给客户端浏览器。然后客户端浏览器会把Cookie保存起来,当下一次再访问服务器时把Cookie包含在请求中发送给服务器,这样服务器就可以识别客户端了。浏览器查看Cookie 各浏览器查看Cookie
2015-08-09 20:47:25
638
powerdesigner16.5的核心功能英文原版文档(全12册)
2020-02-04
《Python+Spark2.0+Hadoop机器学习与大数据实战》原书高清版及源码
2018-09-11
libmemcached-0.34.tar.gz
2012-12-05
如何用pypsark实现多任务并发处理?
2019-10-29
TA创建的收藏夹 TA关注的收藏夹
TA关注的人