spark安装过程中一些重要的问题

2017.10.21~25
此文除记录自己的学习外，旨在看到此文的小可爱们少走弯路

一杯敬朝阳，一杯敬故乡

（相信看到搜到本文的小可爱们一定搜过“软链接and硬链接”，如果没有的话，先去百度一下哈）

今天想给微信创建桌面快捷方式的时候，点右键，发现“创建链接”是灰色的。。。

原因很简单，没权限。是的，在ubuntu下，连创建个快捷方式的权限都没有了沃日！！！

但是我们还有加权限这种骚操作：sudo chmod o+w xxx.xxx 表示授予写xxx.xxx文件的权限

chmod go-rw xxx.xxx表示删除xxx.xxx中组群和其他人的读写权限

spark学习日志：

1.有一些童鞋和我一样，在~/.bashrc里面明明配置了JAVA_HOME，可是执行spark shell的时候还是会报错java home is not set。这个时候你需要在hadoop的目录libexec目录下，执行命令sudo vim hadoop-config.sh，在大概161行可以看到一句JAVA_HOME is not set xxxxx，你只需要在函数外面加上export JAVA_HOME=你的jdk路径就好

2.切记先看日志再百度

3.有些在给力星的spark安装教程，漏掉了给spark加权限这一步，这一步很关键，否则会导致后面各种千奇百怪的错误。在spark文件目录下，执行命令： sudo chown -R hadoop:hadoop ./spark

4.哦对还有件很重要的事，看了我上一篇学习日志的小伙伴可能去装了那个迅雷，那个迅雷经常会后台运行一个mxxxthunder啥的东西，占用9000端口，这个端口很重要！！务必结束这个任务

查询端口：netstat -ap | grep 9000

打开任务管理器：gnome-system-monitor