我想使用hadoop组件将非结构化数据（图像、视频）加载到hdfs中。任何人都可以在这个查询中帮助我。我需要使用哪个hadoop组件来加载非结构化数据。使用这个组件，如何导入它。
zpf6vheq1#
常规文件中的非结构化数据？如果数据存储在某个普通的文件系统中，那么您就不需要任何花哨的组件。您可以使用内置的hdfs工具上传它( hadoop fs 等等）。您可以编写一些shell脚本来自动执行此操作。。。如果由于某种原因，您的数据以blob的形式存储在数据库中，那么可以使用sqoop。
hadoop fs
1条答案
按热度按时间zpf6vheq1#
常规文件中的非结构化数据？如果数据存储在某个普通的文件系统中，那么您就不需要任何花哨的组件。您可以使用内置的hdfs工具上传它(
hadoop fs等等）。您可以编写一些shell脚本来自动执行此操作。。。如果由于某种原因，您的数据以blob的形式存储在数据库中，那么可以使用sqoop。