大規模並列

大規模並列は、数百から数万の計算機やGPUに計算を分けて同時に実行し、非常に大きな問題を解く方式です。

■ 試験で押さえるポイント

• データを分割し、それぞれの計算機に割り当てて処理します。

• 計算機間の通信や同期の負担、処理の偏りが、規模を大きくするときの制約になります。

• 障害に備え、途中の状態を保存して再開できる仕組みが必要です。

■ 選択肢での判断ポイント

アムダールの法則や通信のオーバーヘッドと関連付けて押さえます。