我有hdp2.1集群。我想把ibmq中的数据直接放到hadoop中，探索可以为我做到这一点的工具哪种工具在性能和生产水平方面会更好？我检查了flume（jms源代码），但不确定是否可以在生产级别工作。storm与ibm mq的连接不好http://hortonworks.com/blog/discover-hdp-2-2-apache-kafka-apache-storm-stream-data-processing/有没有其他的生产级工具，我可以使用？
dgsult0t1#
ibmstreams可以很容易地做到这一点。产品附带了两个工具箱来完成此任务：1） streamsx.messaging文件(http://ibmstreams.github.io/streamsx.messaging/)—此工具箱提供了一个jmssource操作符，用于从websphere mq读取数据2） streamsx.hdfs文件(http://ibmstreams.github.io/streamsx.hdfs/)您可以这样构造streams应用程序：jmssource->一些处理->hdfs2filesink有关ibm streams的更多信息，请访问以下站点：http://ibmstreams.github.io/希望这有帮助。
1条答案
按热度按时间dgsult0t1#
ibmstreams可以很容易地做到这一点。产品附带了两个工具箱来完成此任务：
1） streamsx.messaging文件(http://ibmstreams.github.io/streamsx.messaging/)—此工具箱提供了一个jmssource操作符，用于从websphere mq读取数据
2） streamsx.hdfs文件(http://ibmstreams.github.io/streamsx.hdfs/)
您可以这样构造streams应用程序：
jmssource->一些处理->hdfs2filesink
有关ibm streams的更多信息，请访问以下站点：http://ibmstreams.github.io/
希望这有帮助。