解决大文件造成的分区数据量过大的问题

spark 解决大文件造成的分区数据量过大的问题

背景在使用spark处理文件时，经常会遇到要处理的文件大小差别的很大的情况。如果不加以处理的话，特别大的文件 […]