hadoop回收站问题
2013-06-26 17:58
120 查看
/article/4630469.html,起初看到的是这篇文章,按部就班的改了名称节点的core-site.xml,但是当时hadoop fs -rmr 提示的是"deleted hdfs",而不是文章所言的“moved to .trash”,当时网上hadoop trash
的文章都是这个样子,就没有深究了。后来某一天,为了释放hdfs的空间,删除了很多数据,结果发现空间没有释放,这个时候才注意到删除之后提示的是“moved to trash”.猜想是因为名称节点重启过,导致trash服务生效。今天在一台机器上执行hadoop fs -rmr 命令,发现又是deleted hdfs,发现了一个关系,你修改了core-site.xml,在这台服务器上执行rm 就会有回收站的功能,原因大概是因为调用的是这台机器的变量和参数。发现hadoop还是有一个机制,我们的平台有2台nn和18台dn,还有一台app展示界面和一台ftp传送文件。app和ftp并未加入hadoop,不过相关组件全部安装了,这种情况下也可以删除hdfs的数据。引申的隐患就是:内网可以删除hadoop的数据,当然这可能和ssh服务有关。
的文章都是这个样子,就没有深究了。后来某一天,为了释放hdfs的空间,删除了很多数据,结果发现空间没有释放,这个时候才注意到删除之后提示的是“moved to trash”.猜想是因为名称节点重启过,导致trash服务生效。今天在一台机器上执行hadoop fs -rmr 命令,发现又是deleted hdfs,发现了一个关系,你修改了core-site.xml,在这台服务器上执行rm 就会有回收站的功能,原因大概是因为调用的是这台机器的变量和参数。发现hadoop还是有一个机制,我们的平台有2台nn和18台dn,还有一台app展示界面和一台ftp传送文件。app和ftp并未加入hadoop,不过相关组件全部安装了,这种情况下也可以删除hdfs的数据。引申的隐患就是:内网可以删除hadoop的数据,当然这可能和ssh服务有关。
相关文章推荐
- hadoop小文件问题&解决方案
- hadoop安装和使用过程中遇到的问题
- spark程序对hadoop环境的依赖,导致checkpoint失败问题的解决
- Hadoop分布式文件系统——HDFS回收站
- hadoop配置时遇到的常见问题
- 解决hadoop 3.0.0配置过程中无法找到hadoop-env.sh的问题
- hadoop 运行mahout 问题小结(二)
- Hadoop科普文—常见的45个问题解答 · Hadoop
- hadoop 0.20.2在eclipse开发的插件问题
- Hadoop 伪分布模式下关机后,fs端口连接不上问题解决方案
- 解决hadoop集群中datanode启动后自动关闭的问题
- Hadoop中ssh: Could not resolve hostname问题
- 在hadoop-2.2.0集群上使用TotalOrderPartitioner进行排序时遇到的新旧接口问题
- Hadoop学习过程遇到的问题总结
- 运行Hadoop遇到的问题
- hadoop 2.6 运行找不到本地库的问题解决
- hadoop伪分布式配置及遇到的问题
- Hadoop运维中遇到的问题(持续更新中......)
- hadoop节点出现了一个异常问题
- Hadoop YARN常见问题以及解决方案