pyspark 笔记 pyspark.sql.function col VS select

0 原始数据

假如我们有这样的一个数据

pyspark 笔记 pyspark.sql.function col VS select_第1张图片

1 功能上相似

都类似于python的DataFrame中的 df['col_id'],对列取切片的操作

pyspark 笔记 pyspark.sql.function col VS select_第2张图片pyspark 笔记 pyspark.sql.function col VS select_第3张图片

 2  区别

使用col之后,可以进行计算;而原版select 则无法进行计算

pyspark 笔记 pyspark.sql.function col VS select_第4张图片

 pyspark 笔记 pyspark.sql.function col VS select_第5张图片

 

 

你可能感兴趣的:(python库整理,笔记)