一般的なスターターHadoop/Spark fiware-cosmosの質問

Question

私はfiware-cosmosについてのいくつかの一般的な質問がありますが、それらは基本的なものですが、Cosmosのアーキテクチャと用途を理解しようとしています。

私はあなたがCosmosにApache Sparkを統合する予定であることが分かりましたか？それが起こるためのロードマップや日付がありますか？ Sparkを今使用したい場合はどうなりますか？

どのようなHadoopサービスソースを使用できますか？私は、CosmosがCloudera CDHサービスと生のHadoopサーバーサービスをサポートしていると読んだと思いますか？ HortonWorksやMapRはどうですか？

MapR-FSなどのHadoopで標準以外のファイルシステムを使用できることはわかっていますが、これはCosmosで可能なオプションですか？

私は、また、サービスとしてのHadoop（HaaS）を使用することができ、オープンスタックを使用してHadoopクラスタを生成することができます。しかし、人々は共有されたfiwareクラウドを参照していることがわかりました。 fiwareはリモートクラウドとして動作しますか？お客様のサイトでローカルクラウドを使用できますか？

cosmosはfiware.orgの唯一のApache Hadoop/Sparkソリューションですか？

最後に、Cloudera CDHをCosmosと共に使用することができれば、Clouderaクラスタマネージャはどのようにミックスに適していますか？それでも使用できますか？

質問のすべて:)

Answer 1

コスモスのため申し訳ありませんがFIWAREラボにおけるビッグデータGEのグローバルインスタンスの名前です。これはすでにクラウドにデプロイされている共有Hadoopインスタンスで、FIWAREユーザーが使用できる状態になっています。

実際には、2つのインスタンスがあります。「古い」もの、かなり古いバージョンのHadoopスタックを提供し、そのエントリポイントはcosmos.lab.fiware.orgです。そして、「新しい」ものは、​​データストレージ用とデータ解析用のHadoopクラスタのペアです。エントリポイントはstoring.cosmos.lab.fiware.orgとcomputing.cosmos.lab.fiware.orgです。

もちろん、他のHadoop（またはSpark）インスタンスも、FIWAREクラウド（またはAmazonのような他のクラウド）で独自にデプロイすることができます。

スパークについては、当初はFIWARE Labに導入する予定だったため（ロードマップに表示されているため）、現在は導入されることは明らかではありません。