第二题:
第一步:在当前目录下新建一个目录 mkdir -p
src/main/scala,然后在目录/usr/local/spark/mycode/remdup/src/main/scala 下新建一个
remdup.scala
![](https://img2018.cnblogs.com/i-beta/1279500/202002/1279500-20200207201607393-1395183176.png)
在目录/usr/local/spark/mycode/remdup 目录下新建 simple.sbt
![](https://img2018.cnblogs.com/i-beta/1279500/202002/1279500-20200207201625494-831294327.png)
在目录/usr/local/spark/mycode/remdup 下执行下面命令打包程序
![](https://img2018.cnblogs.com/i-beta/1279500/202002/1279500-20200207201639162-1324231249.png)
最后在目录/usr/local/spark/mycode/remdup 下执行下面命令提交程序
![](https://img2018.cnblogs.com/i-beta/1279500/202002/1279500-20200207201657473-1011274462.png)
在目录/usr/local/spark/mycode/remdup/result 下即可得到结果文件。