有没有可能用red hat'paas openshift在云上构建一个大数据应用程序?我正在研究如何在云上构建一个带有hadoop(hdfs)、spark(apache mahout)的scala应用程序,但我找不到任何关于它的东西。我看到了hortonworks的一些东西,但不清楚如何在openshift环境中安装它,以及如何在云中添加hdfs节点。是否可以使用opneshift?这在亚马逊是可能的,但我的问题是:在openshift中可能吗??
oyxsuwqo1#
这取决于你最终想要达到的目标。我知道你提到过用scala在openshift上构建一个大数据应用程序,但是这个应用程序最终会做什么呢?我已经让hadoop在一个齿轮之前运行,但如果你想要一个更好的例子,看看这个快速启动这里得到一个如何完成的想法https://github.com/ryanj/flask-hbase-todos. 我知道它不是scala,但这里有一篇好文章将向您展示如何组合scala应用程序https://www.openshift.com/blogs/building-distributed-and-event-driven-applications-in-java-or-scala-with-akka-on-openshift.
yvgpqqbh2#
应用程序最终将做什么?:预测几个足球联赛的足球比赛结果,一个web应用程序(ruby)和统计计算和数据挖掘,使用scala语言和apache框架(spark&mahout)进行计算。我们通过csv文件获取信息,处理并保存在nosqldb(cassandra)中。所有这些都在云上(openshift),这就是我们的想法。我已经看到信息了https://github.com/ryanj/flask-hbase-todos.i我试着用这种方法,但要用斯卡拉。
2条答案
按热度按时间oyxsuwqo1#
这取决于你最终想要达到的目标。我知道你提到过用scala在openshift上构建一个大数据应用程序,但是这个应用程序最终会做什么呢?
我已经让hadoop在一个齿轮之前运行,但如果你想要一个更好的例子,看看这个快速启动这里得到一个如何完成的想法https://github.com/ryanj/flask-hbase-todos. 我知道它不是scala,但这里有一篇好文章将向您展示如何组合scala应用程序https://www.openshift.com/blogs/building-distributed-and-event-driven-applications-in-java-or-scala-with-akka-on-openshift.
yvgpqqbh2#
应用程序最终将做什么?:预测几个足球联赛的足球比赛结果,一个web应用程序(ruby)和统计计算和数据挖掘,使用scala语言和apache框架(spark&mahout)进行计算。我们通过csv文件获取信息,处理并保存在nosqldb(cassandra)中。所有这些都在云上(openshift),这就是我们的想法。
我已经看到信息了https://github.com/ryanj/flask-hbase-todos.i我试着用这种方法,但要用斯卡拉。