Hive on Tez配置后出现错误

Hive on Tez配置后出现错误

Hive是一个基于Hadoop的数据仓库工具，而Tez是一个基于YARN的执行框架，它可以作为Hive的执行引擎。当我们配置好Hive on Tez环境后，有时可能会遇到一些错误。本文将为您提供一些常见的错误情况以及解决方法。

1. 错误：Tez任务一直处于ACCEPTED状态，但没有进一步进展。

这可能是由于以下原因导致的：

• YARN资源不足：请检查集群中的可用资源是否满足Tez任务的要求。可以通过调整YARN配置文件（如yarn-site.xml）中的相关参数来增加可用资源。

• 阻塞的任务：检查是否有其他正在运行的任务占用了大量资源，导致Tez任务无法获得足够的资源。可以使用YARN的资源管理器界面查看当前运行的任务，并尝试停止或调整资源分配。

• 日志分析：查看Tez任务的日志，特别关注任何异常或错误信息。您可以使用以下命令来查看Tez任务的日志：

  yarn logs -applicationId <application_id>
  ```
  
  

2. 错误：Tez任务失败并显示错误消息。

当Tez任务失败时，通常会显示与任务失败相关的错误消息。以下是一些常见的错误和解决方法：

• 类路径问题：确保在Hive配置文件（hive-site.xml）中正确设置了Tez相关的类路径。请检查tez.lib.uris和hive.execution.engine属性。