您的位置:首页 > 运维架构

hadoop回收站问题

2013-06-26 17:58 120 查看
/article/4630469.html,起初看到的是这篇文章,按部就班的改了名称节点的core-site.xml,但是当时hadoop fs -rmr 提示的是"deleted hdfs",而不是文章所言的“moved to .trash”,当时网上hadoop trash
的文章都是这个样子,就没有深究了。后来某一天,为了释放hdfs的空间,删除了很多数据,结果发现空间没有释放,这个时候才注意到删除之后提示的是“moved to trash”.猜想是因为名称节点重启过,导致trash服务生效。今天在一台机器上执行hadoop fs -rmr 命令,发现又是deleted hdfs,发现了一个关系,你修改了core-site.xml,在这台服务器上执行rm 就会有回收站的功能,原因大概是因为调用的是这台机器的变量和参数。发现hadoop还是有一个机制,我们的平台有2台nn和18台dn,还有一台app展示界面和一台ftp传送文件。app和ftp并未加入hadoop,不过相关组件全部安装了,这种情况下也可以删除hdfs的数据。引申的隐患就是:内网可以删除hadoop的数据,当然这可能和ssh服务有关。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: