windows下Spark源码编译与调试（scala+maven+IDEA）

起因是因为大作业要看一篇关于spark sql的论文，进行试验验证（也是要改动源代码进行验证论文）

环境

1. win10系统环境
2. Java8（及以上）
3. scala 2.11.8（及以上）
4. 在Linux系统上安装maven 3.3.9（及以上）
5. IDEA

编译时报错

报错内容：Error:(24, 51) java: 找不到符号 符号: 类 BytePacker 位置: 程序包 org.apache.parquet.column.values.bitpacking
解决方案参考链接
解决方法:用maven中的“clean”清理掉刚才打的jar包之后就不会报错了。

运行成功后的结果：

参考链接

https://blog.csdn.net/qq_21355765/article/details/81743815
https://blog.csdn.net/u011521382/article/details/81741119