初识hadoop,配置hadoop集群就一番七荤八素,但是再大的坎都过了却往往阴沟翻船。
每次执行hadoop namenode -format对hadoop文件系统进行格式化时总是报错,导致启动后namenode无法成功启动,去网上找了很多帖子去改都没有成功解决。后来发现,每次format之后,无论是否成功,下次format之前把所有hadoop的临时文件统统删掉然后重新format,这样貌似能format成功,至于到底是为什么,我却不晓得。
另外每次重启机器可能会使hadoop的tmp文件全部删除,这样也可能导致hadoop文件系统中的数据丢失,至于是否如此或者这是为什么,也需要进一步考证。
文章详细介绍了初次接触Hadoop时遇到的集群配置与namenode格式化问题,以及如何通过删除临时文件来解决格式化失败的问题。同时探讨了重启机器可能对Hadoop文件系统的影响,提醒读者注意数据安全性。
1693

被折叠的 条评论
为什么被折叠?



