Hive插入数据警告：Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions(2)

最新推荐文章于 2024-07-01 21:31:18 发布

2401_84186109

最新推荐文章于 2024-07-01 21:31:18 发布

阅读量319

点赞数 5

分类专栏：程序员文章标签：大数据面试学习

本文链接：https://blog.youkuaiyun.com/2401_84186109/article/details/138859672

版权

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

WARNING：Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Consider using a different execution engine (i.e. spark, tez) or using Hive 1.X releases.
Query ID = root_20231112140522_fda3dd73-cfa3-4f62-a925-aa02cc107526
Total jobs = 3
Launching Job 1 out of 3
Number of reduce tasks is set to 0 since there's no reduce operator

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

2401_84186109

关注关注

5
点赞
踩
6

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Hive插入数据警告：Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions(1)

2301_77033583的博客

05-10

1065

启动Hadoop，使用启动Hive的JDBC服务并使用IDE连接到Hive，创建表成功，但是INSERT插入数据时经过长时间加载后无法得到预期结果，插入不成功。IDE最终也会提示错误，但仅仅是一个网络异常。然后使用hive命令换为Hive的控制台操作，结果依旧如此。

Hive插入数据警告：Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions

2301_77033583的博客

05-10

1092

然而，很多小伙伴都是本地测试时使用的INSERT，更换Spark、Tez可不是那么容易；实际工作中根据生产环境需要可直接进行引擎修改，甚至都不用你修改，底层自动优化自动选择执行引擎。中已弃用，并且在未来版本中可能不可用。经过查找资料，网友们发现将Hive设置成本地模式来执行任务允许你使用MapReduce。版本中已经不支持MapReduce了，让你换为Spark或Tex。那我要是就不想换，你还能不让我不用MapReduce了？我们发现，这就很明显了，说明Hive在。修改配置后需要重启Hive。

参与评论您还未登录，请先登录后发表或查看评论

WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Conside

feichong621的博客

01-17

1万+

今天在hive中查询了一个简单的select count(*) from table,结果报错 WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Conside 查了一些资料,只要vim /etc/hosts 将你配置的集群hosts都写上去就好了. 然后再重新启动hive/beeline,执行命令即可 ...

解决：WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions.

最新发布

ros275229的博客

07-01

559

修改配置后需要重启Hive；

Hive on Tez

一名假的程序猿

08-13

2797

参考 http://tez.apache.org/install.html https://cwiki.apache.org/confluence/display/Hive/Hive+on+Tez https://cwiki.apache.org/confluence/display/Hive/Hive-Tez+Compatibility https://github.com/apache...

一劳永逸解决Hive执行insert命令调用MR任务报错问题

03-11

6395

一劳永逸_解决Hive执行insert指令集调用MapReduce任务的报错问题

USDP使用笔记（五）设置Hive on Tez解决return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask问题

云来山更佳，云去山如画

03-12

2795

设置Hive on Tez解决return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask问题

hive on spark 部署

yang灬仔

04-29

2684

1. 环境 Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Consider using a different execution engine (i.e. tez, spark) or using Hive 1.X releases hive默认使用mr作为计算引擎，当进入cli时会看到以上的提示信息，刚好有hive2.1.0，查了下pom文件，依赖了spark1.6.0，版本

Hive在执行插入数据等job任务出错

fengjinghong的博客

05-30

8335

1、完全分布式中hive的执行模式参考博客问题描述： Hive在执行job任务时候卡死并报出信息：Number of reduce tasks is set to 0 since there’s no reduce operator（翻译：由于没有减少操作符，减少任务数被设置为0），如图：这样的情况下，Hive 已经无法继续执行，只能退出重启hive(但是依然不能执行)。这是因为虽然输入文件很小，但是需要加载的文件很大，根本吃不消。解决问题： Hive支持任务执行选择本地模式(local mode

hive执行sql时死机

zzw_17600691357的博客

04-29

1067

在执行MR时，一直暂停，无法执行，如下： hive> select count(*) from person_basic; WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Consider using a different execution engin...

hive生产实践问题（一）在使用Hive Client跑job时，一直提示job被kill，

xuxu96

03-31

4055

然后观察YARN的WebUI进行查看，如图：然后观察Hive Client的控制台输出，如下： Launching Job 1 out of 3 Number of reduce tasks is set to 0 since there’s no reduce operator Starting Job = job_1552895066408_0001, Tracking URL = htt...

hive的查询注意事项以及优化总结 .

weixin_33836874的博客

06-20

782

Hive是将符合SQL语法的字符串解析生成可以在Hadoop上执行的MapReduce的工具。使用Hive尽量按照分布式计算的一些特点来设计sql，和传统关系型数据库有区别，所以需要去掉原有关系型数据库下开发的一些固有思维。基本原则： 1：尽量尽早地过滤数据，减少每个阶段的数据量,对于分区表要加分区，同时只选择需要使用到的字段 select ... from A join B ...

hive插入数据失败解决方法

小小码农

03-24

1万+

记录一次hive 错误描述错误：进入hive客户端插入数据报错 # 报错： hive (default)> insert into javaAndBigdata.student(id,name) values (3,"java页大数据"); Query ID = root_20220323224810_5192a9f4-95ae-4166-b21e-c8e5f1493c32 Total jobs = 3 Launching Job 1 out of 3 Number of reduce task

hive查询报错误

dub_lys的博客

07-24

1080

hive> select ip,time from dataclean; Total jobs = 1 Launching Job 1 out of 1 Number of reduce tasks is set to 0 since there's no reduce operator Starting Job = job_1437186236276_0047, Tracking URL

分区读取参数错误_如何修复“警告：重新读取分区表失败，错误22：参数无效”在Linux上错误...

culunyi0802的博客

09-14

3232

分区读取参数错误If you are getting the following error while trying to change the default fat32 partition on a new drive to another linux partition type, I might have the answer for you. 如果在尝试将新驱动器上的默认fat32...