在没有更改任何配置的情况下sqoop突然报警:org.apache.hadoop.util.diskchecker$diskerrorexception: could not find any valid local directory;
原来是硬盘空间满了,占用到了100%;删除没用的数据后,sqoop能正常运行。
过了一天后,又报sqoop error reading task output 异常,查了N久之后才发现是zookeeper的节点down掉了。。。。。重新启动zookeeper节点,运行sqoop导入,正常。。。。集群小加上监控系统不完善麻烦事就是多。。。
本文记录了两次Sqoop运行中遇到的问题及解决办法。第一次是因为硬盘空间满导致的sqoop报警,通过清理磁盘空间解决了问题。第二次是由于Zookeeper节点故障引发的sqoop错误,重启Zookeeper节点后恢复正常。
3154

被折叠的 条评论
为什么被折叠?



