在使用oozie调度sqoop时候经常会出错,而找到出错的行对解决bug至关重要。
思路:1.通过oozie的web控制台找到出错的sqoop对应的hadoop日志信息。
2.sqoop对应的hadoop日志信息中找到出错的子任务的job_id(通常sqoop会启动多个job)
3.通过错误的job_id在hadoop的web控制台中找到具体的错误日志信息。
4.日志下面有错误行的具体内容,如下“On input ” 错误行内容和错误的数据文件
本文介绍了如何通过oozie的web控制台定位sqoop任务出错的日志信息,并通过错误日志找到具体问题所在。重点在于通过hadoop日志和job_id来追踪和解决sqoop调度过程中的bug。
在使用oozie调度sqoop时候经常会出错,而找到出错的行对解决bug至关重要。
思路:1.通过oozie的web控制台找到出错的sqoop对应的hadoop日志信息。
2.sqoop对应的hadoop日志信息中找到出错的子任务的job_id(通常sqoop会启动多个job)
3.通过错误的job_id在hadoop的web控制台中找到具体的错误日志信息。
4.日志下面有错误行的具体内容,如下“On input ” 错误行内容和错误的数据文件
2044
3926

被折叠的 条评论
为什么被折叠?