ARTICLE DETAIL

建站实战干货

来自一线的建站与推广经验沉淀,每一条都经过真实交付验证。

一文详解pyspark常用算子与API

2026/9/10 19:55:53 拓冰建站 浏览量
一文详解pyspark常用算子与API

rdd.glom()

对rdd的数据进行嵌套,嵌套按照分区来进行

    rdd = sc.parallelize([1, 2, 3, 4, 5, 6, 7, 8, 9], 2)print(rdd.glom().collect())

输出:[[1,2,3,4],[5,6,7,8,9]]

参考

  • PySpark基础入门(2):RDD及其常用算子_spark rdd 随机抽样-CSDN博客