在通过VectorAssembler将多列特征值和并后，由于spark存储格式的原因，会将含有很多0值的一行转为稀疏向量sparseVector
进行存储。然而在后续计算过程中，我们需要的是密集向量，所以需要将稀疏向量转为密集向量。
1.先通过VectorAssembler将需要的列转成向量列
2.转为RDD后map操作，将feature列中的元素转为DenseVector
在这里插入图片描述
spark中稀疏向量转密集向量
猜你喜欢
转载自blog.csdn.net/weixin_44695793/article/details/109135659
今日推荐
周排行