spark
文章平均质量分 82
jackliu2013
不怕聪明的人,不怕笨笨的人,就怕比自己聪明的人还在拼命向前走。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
spark 的WholeTextFile使用以及文件路径
/** * */package com.lewa.jsonimport org.apache.spark.{ SparkConf, SparkContext }import org.apache.spark.SparkContext._import org.apache.spark.mllib.classification.SVMWithSGDimport or原创 2014-11-20 16:47:05 · 6835 阅读 · 1 评论 -
hive 文档 wiki-doc
wiki:https://cwiki.apache.org/confluence/display/Hive/GettingStarted#GettingStarted-DDLOperationsDDL: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL翻译 2014-12-15 14:40:41 · 1554 阅读 · 0 评论 -
hive 学习(1) 内置函数以及数据类型
第一部分:关系运算Hive支持的关系运算符•常见的关系运算符•等值比较: =•不等值比较: •小于比较: •小于等于比较: •大于比较: >•大于等于比较: >=•空值判断: IS NULL•非空判断: IS NOT NULL•LIKE比较: LIKE•JAVA的LIKE操作: RLIKE转载 2014-12-15 14:30:55 · 777 阅读 · 0 评论 -
cloudera的hue 安装
hue的安装需要依赖 oozie 服务, 所以先安装oozie服务原创 2014-12-13 15:19:20 · 1245 阅读 · 0 评论 -
cloudera的各种默认数据库 hive mysql
(1)hive hive的元数据信息默认在derby数据库中 其他的存储用到再补充。原创 2014-12-04 14:32:13 · 2180 阅读 · 1 评论 -
Exception in thread "main" org.apache.spark.SparkException: Task not serializable异常
问题原因:解决方案:原创 2014-11-24 10:31:55 · 26217 阅读 · 0 评论 -
hive (2) partion 学习 相关文章
相关的几篇文章:http://www.tuicool.com/articles/BZja2ahttp://blog.youkuaiyun.com/jiedushi/article/details/6778521http://www.tuicool.com/articles/73Qbyahttp://abloz.com/2012/07/19/create-the-hbase-an-e原创 2014-12-16 10:15:52 · 622 阅读 · 0 评论 -
spark运行异常--以后找到解决方案了再修改
WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable原创 2014-11-24 09:43:34 · 1181 阅读 · 0 评论 -
2014年11月25日 -------hdfs fs 命令的使用(用到的就扩充上)
hdfs :[hdfs@launcher-17 ~]$ hdfsUsage: hdfs [--config confdir] COMMAND where COMMAND is one of: dfs run a filesystem command on the file systems supported in Hadoop原创 2014-11-25 16:04:20 · 975 阅读 · 0 评论 -
Exception in thread "main" org.apache.spark.SparkException: Task not serializable--two
Exception in thread "main" org.apache.spark.SparkException: Task not serializable原创 2015-03-13 11:54:49 · 8738 阅读 · 0 评论
分享