mindspore.ops.communication.all_gather_object

查看源文件
mindspore.ops.communication.all_gather_object(object_list, obj, group=None)[源代码]

在指定通信组中聚合Python对象。

说明

类似于 mindspore.ops.communication.all_gather(),但可以传入Python对象。

警告

本接口会隐式使用pickle模块,该模块是不安全的。核心原因是反序列化时会执行任意代码,攻击者可通过构造恶意对象触发系统命令执行。因此,调用者须自行保障接口使用数据的安全性。

参数:
  • object_list (list[Any]) - 输出Python对象列表。

  • obj (Any) - 从当前进程广播的Python对象。

  • group (str,可选) - 通信组名称。默认值: None ,即Ascend平台表示为 "hccl_world_group"

异常:
  • TypeError - group 不是str。

  • TypeError - 如果 object_list 的大小不等于组大小。

  • RuntimeError - 如果目标设备无效,或后端无效,或分布式初始化失败。

支持平台:

Ascend

样例:

说明

运行以下样例之前,需要配置好通信环境变量。

针对Ascend设备,推荐使用msrun启动方式,无第三方以及配置文件依赖。详见 msrun启动

该样例需要在2卡环境下运行。

>>> from mindspore.ops.communication import init_process_group, get_rank
>>> from mindspore.ops.communication import all_gather_object
>>> init_process_group()
>>> rank = get_rank()
>>> obj = ["test", {1: 2}]
>>> object_gather_list=[None, None]
>>> all_gather_object(object_gather_list, obj[rank])
>>> print(object_gather_list)
# rank_0
['test', {1: 2}]
# rank_1
['test', {1: 2}]