飞桨x昇腾生态适配方案:00_整体方案介绍
前言
- 本文重点介绍Paddle与NPU的适配工作,PaddlePaddle是一个深度学习框架,类似于pytorch;PaddleCustomDeviece是适配层代码,类似于pytorch adapter;模型侧代码根据领域分为PaddleNLP、PaddleMix、PaddleClas、PaddleOCR等。
- 如果需要运行在线的训练或者推理,可以直接参考模型仓的README,并更改deviece为NPU即可。当前已经支持了大部分主流模型且在持续增加中,具体的模型列表可参照,大部分模型的性能基本持平V100,少部分专项调优模型可以达到0.8*A800(主要是大模型,多模态)。
- 如果在线推理性能较差且只需要推理的场景,统一建议使用离线场景,Paddle2ONNX工具转化为ONNX,并使用atc转换为OM,具体可参照Paddle转OM以及离线推理章节内容。
硬件适配说明
- 当前的适配工作主要针对A2芯片,以下所有内容如果没有特殊说明都只针对A2芯片;
- A1芯片在大部分情况下没有问题,且使用方式与A2相同,如遇到类似项目可自行使用相同方式进行验证,遇到问题单点支撑;
- 310系列芯片没有进行过适配,建议直接走离线推理路径。
常用Paddle模型仓
- NLP代码仓PaddleNLP:
- 多模态代码仓PaddleMIX:
- 小模型总体仓库PaddleX:
- 其余仓库可查看Paddle主页面:
- 随机文章
- 热门文章
- 热评文章
- 深入了解百度明星脸在线测试:探索AI技术在娱乐领域的应用百度明星脸在线测试脸免费
- 国际标准智商测试题目解析与策略国际标准智商测试题60题
- 国际标准智商测试:探索智力评估的科学方法国际标准测试智商30题解答
- 测你喜欢的人实际有几副面孔
- Java Hibernate ORM系统
- 人格瓶子小测试选一个瓶子分析你的人格
- 测测你的脾气爆炸点是什么
- 从内存泄露到全栈资源治理:Deleaker如何成为开发者的终极防线
- 心理在线测试 测测你有没有能力
上一篇:支配欲望强烈 你会是老虎型性格的人吗 下一篇:UDP协议(特点与应用场景)
回归分析



