hadoop pig输出-如何跳过json阶段

hjzp0vay  于 2021-05-30  发布在  Hadoop
关注(0)|答案(0)|浏览(291)

有了pig的结果,我的结果结构中有一些时间包,一些时间元组。有时包是空的,有时元组是空的。
当我在一个空袋子上做一个“展平”时,我得到了一些非常奇怪的错误:比如字段名出现,删除了与它相关的值。
我只想让pig输出一个简单的csv,但是当我执行pigstorage时,它会输出数据结构产生的所有大括号和元组括号。我不知道该怎么摆脱。有什么线索吗?我尝试了“dump”方法,但它已从当前的pig版本中删除(我在0.14中)。
所以,从今天起,我不想再做了。我有一个python脚本,它可以读取pig创建的json并重新创建一个漂亮的数据表。我猜这不是该做的事。当我们事先不知道pig中的数据结构时,我们如何将其扁平化??
在你的日常程序员生活中你是怎么做到的??

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题