数据归档解决方案

kognpnkq  于 2021-06-26  发布在  Hive
关注(0)|答案(1)|浏览(394)

我有一个在后端使用mysql建立的应用程序,大约有130个表,总大小目前超过30-40gb,而且增长很快。
我们的数据库优化得很好,但我们相信由于数据库的大小,性能受到了影响。
我需要实现一个过程来存档数据,在读了一点之后,我读到我可以把所有可存档的数据推到hadoop上,我需要知道的是,有没有什么方法可以直接点击hadoop从我的后端检索数据(codeigniter、cakephp、django等…)谢谢

u1ehiz5o

u1ehiz5o1#

我想你可以试试apache sqoop:http://sqoop.apache.org/
sqoop1最初设计用于将数据从关系数据库移动到hadoop。sqoop2更具野心,旨在在任意两个源之间移动数据。

相关问题