3月14日,当ChatGPT还在火热的时候,OpenAI正式推出了自己的最新作品,——多模态大模型GPT-4再次掀起科技圈。
和ChatGPT使用的GPT-3.5相比,GPT-可以处理更复杂的图像、文本信息。OpenAI称之为扩展深度学习的最新里程碑。工业流通,GPT-4的参数规模将达到万亿,其训练需要更高效、支持更强大的计算能力。
显然,人工智能大模型“狂飙”背后是对计算能力的极度渴求。谁率先掌握了先进的计算能力,谁就能在当下占据主动。
那么什么是高级计算能力呢?
作为动力赛道的领跑者,曙光用实践给出了答案。
曙光通过前瞻性布局和技术创新,形成了覆盖AI计算全链条的业务体系,可以为用户提供多样性、绿色、高效、安全全场景人工智能计算服务。其中,5A智能计算中心作为业内领先的新型计算基地,不仅可以实现全精度计算供电,而且基于开放的建设路线,支持90%上述主流人工智能框架及其工业应用。确保它成为一种自然语言、机器视觉、多模态等预训练大模型提供了强大的计算能力,同时也进一步降低了部署和开发的门槛。
此外,借助浸没式相变液冷技术,5A智能计算中心核心系统的PUE值可降至1.04,大大降低了计算设备的运行温度,提高了运行稳定性。所以AI大模的高强度更有保障、连续性训练作业。
目前曙光已与致远研究院合作、中科院自动化所、百度深度合作,对于“悟道2.0紫东太初”文心”大型模型训练提供高级计算支持。并通过并行策略、算子、工具包等方面的优化,使AI模型的训练效率显著提高。
© 版权声明
文章版权归作者所有,未经允许请勿转载。
THE END
暂无评论内容