无需从s3加载到db即可获取计数

bvjxkvbb  于 2021-06-24  发布在  Hive
关注(0)|答案(1)|浏览(314)

当在线应用程序基于查询参数发出请求时,我必须返回计数。为了实现这一点,我们使用管道将大量数据加载到数据库中,然后当收到请求时,我们查询数据库并返回计数。
由于数据存在于s3上,当我们接收到请求和返回计数时,是否有方法直接在s3上查询数据,而不是编写整个基础结构?
我能用Hive吗?

i7uq4tfw

i7uq4tfw1#

看看AmazonAthena:它提供了一种直接在s3上查询数据的简单方法。
您只需将数据指向s3,定义所需的模式,然后使用标准sql就可以了。

相关问题