功能相关 FAQ

Q: MindSpore Transformers和MindFormers两个名字的区别？

A: 二者指的是同一个套件。MindSpore Transformers是套件的正式名称；MindFormers是套件的简称，也是仓库名，并在代码中使用。

Q: MindSpore Transformers和MindSpore NLP两个套件的区别？

A: MindSpore Transformers是MindSpore的大模型套件，主要面向大语言模型（LLM）和多模态模型（MM）在大规模场景下的训练和推理。MindSpore NLP是MindSpore的领域套件，主要面向自然语言处理（NLP）领域的中小模型的训练。二者在定位上有所不同，用户可以根据自身需求选择使用。

Q: WikiText数据集下载链接失效。

A: 官方下载链接失效，请关注社区Issue #IBV35D。

Q: 如何生成模型切分策略文件？

A: 模型切分策略文件记录了模型权重在分布式场景下的切分策略，一般在离线权重切分时使用。在网络yaml文件中配置only_save_strategy: True，然后正常启动分布式任务，便可在output/strategy/目录下生成分布式策略文件，详细介绍请参阅分布式权重切分与合并教程。

Q: 生成`ranktable`文件报错`socket.gaierror: [Errno -2] Name or service not known`或者`socket.gaierror: [Errno -3] Temporary failure in name resolution`，怎么解决？

A: 从MindSpore Transformers r1.2.0版本开始，集群启动统一使用msrun方式，ranktable启动方式已废弃。

Q: 通过源码安装MindSpore Transformers时依赖包下载速度慢，怎么解决？

A: build.sh使用清华源下载MindSpore Transformers所依赖的Python包。如需修改镜像源，可以修改build.sh中下载命令pip install mindformers*whl -i https://pypi.tuna.tsinghua.edu.cn/simple ，将-i后地址替换为目标镜像源地址。