woqiang68-优快云博客

转载 hadoop中mapred.tasktracker.map.tasks.maximum的设置

目前，我们邮件的一部分log已经迁移到Hadoop集群上并由Hive来执行相关的查询hadoop中默认的mapred.tasktracker.map.tasks.maximum设置是2也即：每一个tasktracker同时运行的map任务数为2照此默认设置，查询80天某用户的操作日志，耗时5mins, 45sec经过测试，发现将mapred.tasktracker.map.ta...

2018-02-15 10:46:28 1813

转载 Hbase表数据的导入和导出

转载自:http://blog.youkuaiyun.com/javajxz008/article/details/61173213Hbase没有提供类似于hive根据已有表的建表建表语句，如在hive中创建一个和已有表表结构完全一样的表可执行SQL：create table tbl_test1 like tbl_test,在hbase只能采用笨办法，将其表结构拷贝出来建表。如：

2018-01-23 16:31:14 992

转载 python中的jieba分词使用手册

python jieba 中文分词

2018-01-02 14:28:31 1155

原创 rdd中赋值操作例子

rdd中赋值

2017-12-06 13:20:55 1916

原创 hbase版本对应的hadoop版本

hbase版本对应的hadoop版本

2017-11-08 17:37:26 1947

原创龙哥,流泪,尊严

成龙,男人的眼泪和尊严有关

2017-11-02 11:57:46 646

原创打印rdd

spark中,把rdd打印输出到终端

2017-10-13 11:15:30 714

原创中文分词词性对照表

中文分词词性对照

2017-09-12 10:51:39 1332

原创 CentOS修改ulimit（最大进程数和最大文件打开数)

CentOS修改ulimit 打开最大文件数，最大进程数

2017-08-29 21:38:30 2169

转载这些都是曾经被人瞧不起，现在却让人高攀不起的5位明星！！

这些都是曾经被人瞧不起，现在却让人高攀不起的5位明星！！

2017-08-19 22:58:20 868

原创环境变量path与classpath区别

path与classpath,JAVA_HOME的区别

2017-08-19 15:31:25 683

转载从“周星星”到“星仔”再到“星爷”做人如果没有梦想，和咸鱼又有什么分别？

没有梦想，和咸鱼有什么区别

2017-08-19 15:09:44 843

转载 Hadoop日志存放路径详解

hadoop日志存放路径

2017-08-18 21:30:38 2901

转载 spark常见问题汇总

spark常见问题汇总

2017-08-17 21:07:08 2567

原创序列化与反序列化

序列化与反序列化

2017-08-17 15:44:33 275

转载 flume与kafka

flume和kafka的比较

2017-08-10 12:35:12 421

转载周星驰，你别这么贬低自己好嘛，你已经很努力了！

周星驰努力做自己!

2017-08-02 16:09:54 1499

原创倒排索引和正排索引

倒排索引和正排索引区别

2017-08-01 23:42:11 3048

转载搜索引擎之正排索引

搜索引擎中正排索引介绍

2017-08-01 10:48:47 504

原创 storm框架跑wordcount

storm框架下跑wordcount

2017-07-31 19:00:34 350

原创 Python集合（set）类型的操作

python set操作

2017-07-24 18:05:13 487

原创 hdfs设置回收站

hdfs通过设置trash回收站来恢复误删文件

2017-07-14 11:58:58 648

原创 python函数之join

python 连接字符串函数:join

2017-07-11 09:23:43 502

原创 hadoop streaming 按字段排序与输出分割详解

hadoop streaming 按字段排序与输出分割详解

2017-07-07 10:58:01 895

转载 MapReduce实现两表的Join--原理及python和java代码实现

MapReduce实现两表的Join--原理及python和java代码实现

2017-07-07 10:52:50 1210

原创 hive join 数据倾斜真实案例

hive join 数据倾斜真实案例

2017-07-07 10:36:20 778

原创 Hadoop-Streaming实战经验及问题解决方法总结

Hadoop-Streaming实战经验及问题解决方法总结

2017-07-07 09:49:09 879

原创 HBase常用操作之namespace

HBase常用操作之namespace

2017-07-05 16:26:08 626

原创查看python源码之jieba安装

jieba分词

2017-06-30 17:21:10 1983

原创 python 实现Hadoop的partitioner和二次排序

python 实现Hadoop的partitioner和二次排序

2017-06-30 11:15:25 1155

原创 python 运行 hadoop 2.0 mapreduce 程序

python 运行 hadoop 2.0 mapreduce 程序

2017-06-29 01:05:48 647

原创设置linux下heartbeat服务开机启动

设置linux下heartbeat服务开机启动

2017-06-21 14:30:45 1137

原创论述flume中batchSize,capacity,transactionCapacity参数之间的关系

论述flume中batchSize,capacity,transactionCapacity参数之间的关系

2017-06-20 22:46:01 12698

原创 eclipse新建web项目运行时出现The requested resource is not available异常

eclipse新建web项目运行时出现The requested resource is not available异常

2017-06-19 17:58:40 1752

原创 tomcat在eclipse中起动成功，主页却打不开

eclipse,tomcat配置,页面打不开

2017-06-19 17:20:47 1076

原创周星驰成名前的故事

周星驰的成名路

2017-06-19 13:34:31 897

原创虚拟机NAT模式设置连接外网

虚拟机nat模式连接外网

2017-06-12 17:01:29 1852

原创克隆虚拟机

克隆虚拟机修改mac地址

2017-06-11 14:52:13 340

原创我的编程竞赛之路 ——中国大学生计算机编程第一人楼天城访谈

我的编程竞赛之路 ——中国大学生计算机编程第一人楼天城访谈

2017-06-09 21:38:38 9419

原创 mysql执行外部sql文件的命令

mysql执行外部sql文件

2017-06-08 23:43:39 945

数据挖掘与商业技能完全解决方案sqlserver

数据挖掘与商业技能完全解决方案 sqlserver

2014-03-27

在线音乐网站

ssh整合框架开发,项目有三个，分别对应mysql数据库,sqlserver2000数据库与sqlserver2005数据库。

2013-06-05

mysql jar 驱动包

mysql驱动 jar包,直接在MyEclipse中就可以方便使用

2013-05-01

oracle-concepts10g 中英文对照 word格式

无论你是作为一个dba还是作为一个oralce的开发人员，oralce-concepts是你必须必备的一个概念手册。

2013-04-14

c#项目留言本

c#编写的留言板，还不错。适合初学者，分类清晰，详细，代码浅显易懂。

2013-03-29

rlwrap软件 linux下解决sqlplus不能后退的软件

rlwrap软件内含安装txt 解决linux环境下sqlplus不能前进后退问题，方便在sqlplus环境下轻松解决输入问题。

2013-03-14

ocp上课文档

提供ocp考证必备的一套学习资料。题库必备，学习OCP，得到OCP证书不是梦想

2013-02-28

PL SQL Developer免安装版

下载后可以直接输入oracle用户和密码进行登录。

2013-02-23

在线考试系统

c#编写的在线考试系统，使用三层架构，DAO开发，对c#三层架构有兴趣的可以下载一下看一下，相信对你会有帮助！

2013-02-23

oracle学习手册

oracle 学习手册，综合了工作中的实例。会带给你真正的价值！

2013-01-24

JSP论坛系统

java web开发论坛系统，支持在线回复，管理员删除与管理帖子。

2013-01-24

问卷管理系统

Java web开发问卷管理系统，自己编写的。适合初学者

2013-01-24

java web开发简单留言板

简单易懂的java web应用的留言板小项目。

2013-01-23

操作系统第三版课件（汤晓丹版）

本课件包含整本书，很全。不需要买书的可以下载下来在电脑上看

2012-11-21

c#音乐播放器

自己做的音乐播放器，感觉功能不太齐全，但代码本人已经注释，浅显易懂。

2012-11-13

c++计算器系统

c++编写的计算器系统，代码简单易懂。适合初学者下载学习

2012-02-24

c#图书管理系统

c#编写的图书管理系统。。适合于初学者。。

2012-02-24

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人