CPU上のMPI-2対GPU

Question

私はMPI-2を使ってコードを並列化しようとしています。私は8コアプロセッサを使用している間、スピードアップに成功しています。

CPUの代わりに同じ目的のためにGPUを使用すると、どのような影響が出るのだろうかと思っていましたか？これまでの私の研究によると、OpenMPIはGPUと互換性があり、プロセッサ間の通信がCPUに比べて多い場合はスピードアップがより良いことになります。誰かがそれを試したことがありますか、または同じ意見を持っていますか？

Answer 1

GPU並列化は、MPI並列化とはまったく異なる方向です。つまり、GPUスレッドはMPIランクのように動作せず、MPI呼び出しを行うことができません。 MPIプログラムの各ランクでGPUコードを呼び出すことで、それらを組み合わせることができます。