阿里云神龙AI加速引擎如何助力vivo训练性能飞跃30%-70%？
- 内容介绍
- 文章标签
- 相关推荐
本文共计1034个文字，预计阅读时间需要5分钟。
神龙AI加速引擎，双结合，更强劲！vivo简介：vivo专注于智能手机领域的国际化品牌，追求乐趣、充满活力、专业音质、极致影像、愉悦体验的智能产品，并将勇于追求极致。
神龙AI加速引擎与GPU云服务器，双结合，更强劲~ 公司简介vivo是专注于智能手机领域的国际化品牌，vivo追求乐趣、充满活力、专业音质、极致影像、愉悦体验的智能产品，并将敢于追求极致、持续创造惊喜作为vivo的坚定追求。 2014年vivo品牌的国际化之路全面开启，除中国大陆市场外，vivo进驻的海外市场包含印度、泰国、缅甸、马来西亚、印度尼西亚、越南和菲律宾。
业务痛点1. GPU利用率不高，资源浪费明显：VIVO客户的业务场景中使用的是大规模多模态模型。对该类模型进行分布式训练时，通常使用单步更新的训练模式，即每一次单步训练之后都会进行一次梯度通信，这样会导致短时间内出现大量的通信请求，造成很大的通信压力。同时，该模型的参数量较大，每次梯度通信的通信量与模型参数量成正比，这进一步的增加了通信压力。另外，该模型的训练过程中也没有对计算和通信进行时间上的重叠，这也显著的导致了训练过程中的通信时长的增加。整个分布式训练过程中大量的时间被梯度通信占据，GPU的计算资源在大多数时间处于等待状态，无法完美发挥作用。
2. 训练时间长，业务模型迭代周期太长：客户业务模型的更新频率很高，每次模型迭代期间不仅要进行模型的分布式训练，还要进行测试，上线等流程。在这个迭代周期内，分布式训练占据了大量的时间，导致其它流程不得不精简以保证迭代周期，这也使得客户的业务团队承担不小的压力。
本文共计1034个文字，预计阅读时间需要5分钟。
神龙AI加速引擎，双结合，更强劲！vivo简介：vivo专注于智能手机领域的国际化品牌，追求乐趣、充满活力、专业音质、极致影像、愉悦体验的智能产品，并将勇于追求极致。
神龙AI加速引擎与GPU云服务器，双结合，更强劲~ 公司简介vivo是专注于智能手机领域的国际化品牌，vivo追求乐趣、充满活力、专业音质、极致影像、愉悦体验的智能产品，并将敢于追求极致、持续创造惊喜作为vivo的坚定追求。 2014年vivo品牌的国际化之路全面开启，除中国大陆市场外，vivo进驻的海外市场包含印度、泰国、缅甸、马来西亚、印度尼西亚、越南和菲律宾。
业务痛点1. GPU利用率不高，资源浪费明显：VIVO客户的业务场景中使用的是大规模多模态模型。对该类模型进行分布式训练时，通常使用单步更新的训练模式，即每一次单步训练之后都会进行一次梯度通信，这样会导致短时间内出现大量的通信请求，造成很大的通信压力。同时，该模型的参数量较大，每次梯度通信的通信量与模型参数量成正比，这进一步的增加了通信压力。另外，该模型的训练过程中也没有对计算和通信进行时间上的重叠，这也显著的导致了训练过程中的通信时长的增加。整个分布式训练过程中大量的时间被梯度通信占据，GPU的计算资源在大多数时间处于等待状态，无法完美发挥作用。
2. 训练时间长，业务模型迭代周期太长：客户业务模型的更新频率很高，每次模型迭代期间不仅要进行模型的分布式训练，还要进行测试，上线等流程。在这个迭代周期内，分布式训练占据了大量的时间，导致其它流程不得不精简以保证迭代周期，这也使得客户的业务团队承担不小的压力。