Re Reference AI

分散処理

分散処理に関連する用語(1件)

分散処理は、複数のマシンやプロセッサに処理を分担させる技術です。大規模モデルの学習ではデータ並列・テンソル並列などの手法で数千のGPUを協調させます。

用語一覧

Ray

Pythonの並列・分散処理を簡単に書けるようにする、機械学習ワークロード向けのオープンソース分散実行フレームワーク

インフラ分散処理スケーリング