Это тупо посылка сообщений. Ты, конечно, можешь на их основе построить что твоей душе угодно, но надо понимать, что внутрях у него тот же MPI, причём сделали это специально, так как MPI использовался до комассивов для распараллеливания кода на фортране.
где есть помылка сообщений по сети всегда возникает проблема, либо проёба сообщений, либо их дубликации. а обееспечение всяких надёжных семантик типа exactly-once / effectively-once это уже удар по перфу. интересно как это решает фортран. или всё перекладывается на программистов? - мол сам поверяй как оно доставилось