ハイドープでマップ配置を行うにはどうしたらいいですか？

私はhadoopでマップ配置をしたいと思います。つまり、データのどの部分をどのマシンで処理するかを選択したいのですか？どうすれば作れますか？おかげハイドープでマップ配置を行うにはどうしたらいいですか？

2017-01-03 saeednasehi

あなたは[FairScheduler]（https://hadoop.apache.org/docs/r2.7.3/hadoop-yarn/hadoop-yarn-siteを見てきました/FairScheduler.html#Automatically_placing_applications_in_queues）？ FairSchedulerがこれらのアプリケーションを処理するために、各データタイプごとに小さなアプリケーションを作成し、キューを作成することができます。また、[ヘイルキャスト]（https://hazelcast.org/） –

あなたはノードのラベルを使用して試みることができる： https://hadoop.apache.org/docs/r2.7.3/hadoop-yarn/hadoop-yarn-site/NodeLabel.html

出典

2017-01-03 08:58:24 facha

を見てくださいありがとう、しかし、私はマップの配置をしたいので、これは私を助けることができないと思う。つまり、マシン1で最初に64MB、マシン3で2番目の64MB、マシン2で3番目の64MBが処理されるようにしたいということです。 – saeednasehi

ハイドープでマップ配置を行うにはどうしたらいいですか？

答えて

関連する問題