自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(3)
  • 资源 (7)
  • 收藏
  • 关注

原创 sqoop从mysql往hive导数据突然变慢

现象:发现:在这个时间段停滞了这段时间是sqoop执行,上传jar包到对应的job里,我手动上传jar包发现速度很快,我就查了一下nn的日志,还有dn的日志.如下:readAndProcess from client 172.16.171.37:49462 threw exception [java.io.IOException: Requested data length 91071788 is longer than maximum configured RPC length

2021-02-27 12:13:04 1899

原创 如果该天没值,填充最近一个有值天的数据

测试表如上图,需求如果该天没值补充最近一个有值天的数据sql实现:

2020-11-24 17:02:59 266

原创 idea搭建maven spark环境(新建不出scala的类)

问题:建了一个spark的maven项目,发现new不出scala解决: 如图1.2.添加scala3.发现还是new不出scala的类,发现scala文件夹是灰的4.添加到source5.成功本人写的第一篇博客,2019-10-27 22:50:00,纪念一下...

2019-10-27 22:52:59 385

Azkaban和datax安装文档.docx

Azkaban和datax安装文档

2019-07-09

datax的json范例

datax的简单范例. 有一些解释,适用于初学者

2018-08-26

datax数据从hive导入mysql数据缺失解决

datax数据从hive表导入mysql表,数据缺失解决

2019-01-18

tools-1.8.0.jar

tools-1.8.0.jar............................................................................................................................................

2018-05-02

jconsole-1.8.0.jar

jconsole-1.8.0.jar.......................................................................................................................................

2018-05-02

手机号地址解析sql

手机号地址解析sql,包括手机号段,省份,城市,运营商,更新至2020年.

2020-11-24

hive自定义UDF编写函数.docx

hive的udf函数实现

2021-01-26

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除