
partitions
文章平均质量分 52
空中的鱼1987
这个作者很懒,什么都没留下…
展开
-
Number of dynamic partitions RemoteException LeaseExpiredException
hive做大数据处理时,遇到如下异常:[Fatal Error] Operator FS_2 (id=2): Number of dynamic partitions exceeded hive.exec.max.dynamic.partitions.pernode.......org.apache.hadoop.hive.ql.metadata.HiveException: org原创 2016-07-13 17:23:02 · 615 阅读 · 0 评论 -
hive dynamic partitions insert java.lang.OutOfMemoryError: Java heap space
动态分区问题,如果数据量大或者当动态分区大甚至只有十几个时,会出现如下异常:2015-10-23 16:43:54,165 INFO [fetcher#10] org.apache.hadoop.mapreduce.task.reduce.ShuffleSchedulerImpl: assigned 20 of 34 to spark-03:13562 to fetcher#10201原创 2016-07-13 17:30:24 · 1455 阅读 · 0 评论