在apache pig上使用numpy和scipy

wz1wpwve  于 2021-06-24  发布在  Pig
关注(0)|答案(1)|浏览(347)

我想用ApachePig编写UDF。我将使用python自定义项。我的问题是我有大量的数据要分析,需要像numpy和scipy这样的包。买这个他们没有jython的支持,我不能用他们和Pig。
我们有取代基吗?

x33g5p2x

x33g5p2x1#

您可以通过导入scipy的(c)python脚本进行流式处理。例如,我使用import scipy.cluster.hierarchy,使用它来对包中的数据进行聚类

相关问题