mindscience.distributed.manager.get_context_parallel_world_size

mindscience.distributed.manager.get_context_parallel_world_size()[源代码]

获取训练并行组的大小。

返回:

int。训练并行组中卡的总数。