我有一个项目，它有配置单元脚本每天处理hadoop数据。我想改变HiveSpark处理每小时或实时处理。将配置单元脚本转换为spark的最佳方法是什么？
sqxo8psd1#
你几乎不需要做任何转换。spark运行与hive完全相同的sql语法。或者你可以让Hive运行使用oozie或cron来安排每小时的时间间隔。不要使用Spark流
1条答案
按热度按时间sqxo8psd1#
你几乎不需要做任何转换。spark运行与hive完全相同的sql语法。或者你可以让Hive运行
使用oozie或cron来安排每小时的时间间隔。不要使用Spark流