如何在PySpark中转置特定列

2q5ifsrm 于 2022-11-21 发布在 Spark

关注(0)|答案(1)|浏览(112)

我有以下 PySpark 数据帧：

year    week    date    time          value
2020    1     20201203  2:00 - 2:15    23.9
2020    1     20201203  2:15 - 2:30    45.87
2020    1     20201203  2:30 - 2:45    87.76
2020    1     20201203  2:45 - 3:00    12.87

中的每一个
我想转置时间和值列。所需的输出应为：

year   week    date    2:00 - 2:15     2:15 - 2:30     2:30 - 2:45    2:45 - 3:00
 2020   1     20201203    23.9             45.87           87.76          12.87

格式

pyspark

来源：https://stackoverflow.com/questions/74468006/how-to-transpose-specific-columns-in-pyspark

1条答案

按热度按时间

afdcj2ne1#

您可以使用groupby和pivot。

df = df.groupby('year', 'week', 'date').pivot('time').max('value')

赞(0）回复(0）举报 2022-11-21

我来回答

如何在PySpark中转置特定列

1条答案

相关问题

热门标签

最新问答