mindscience.distributed.manager.get_context_parallel_world_size

查看源文件
mindscience.distributed.manager.get_context_parallel_world_size()[源代码]

获取训练并行组的大小。

返回:

int。训练并行组中卡的总数。