SparkSQL 开发中遇到的参数坑-1

SQLConf

SQLConf 默认情况下ORC文件格式的文件,过滤条件默认不适用谓词下压导致性能极差。但是他默认是压缩的,10000条

SQLConf

verifyPartitionPath 参数也是false的


SQLConf 在1.6版本之前是false 后面变成了true










猜你喜欢

转载自blog.csdn.net/qq_15300683/article/details/80638242