我想知道如何将数据从cassandra导入hadoop文件系统，以及如何定期进行导入（例如，当cassandra数据库发生更改或新数据插入cassandra时，我们如何检测更改并将数据迁移到hdfs（hadoop文件系统）？。
6qfn3psc1#
你有多种选择。您可以编写顺序程序、mapreduce作业或pig等。对于自动化，您还有几个选项。你可以有一个cron来为你做这件事，或者如果你想让你的工作流程更复杂，你可以使用oozie（一个工作流引擎），它可以根据你想要的标准安排你的工作。hth公司
1条答案
按热度按时间6qfn3psc1#
你有多种选择。您可以编写顺序程序、mapreduce作业或pig等。对于自动化，您还有几个选项。你可以有一个cron来为你做这件事，或者如果你想让你的工作流程更复杂，你可以使用oozie（一个工作流引擎），它可以根据你想要的标准安排你的工作。hth公司