华为发布两款AI存储新品
来源:搜狐
时间:2023-07-27 21:29:12 130浏览 收藏
最近发现不少小伙伴都对科技周边很感兴趣,所以今天继续给大家介绍科技周边相关的知识,本文《华为发布两款AI存储新品》主要内容涉及到等等知识点,希望能帮到你!当然如果阅读本文时存在不同想法,可以在评论中表达,但是请勿使用过激的措辞~
发布会现场。(华为供图)
【深圳商报讯】(记者 陈姝)人工智能从大模型逐渐走向超大模型,从单模态走向多模态,数据存储成为关键要素。以存力和算力为中心的大模型时代已经来临。7月14日,华为发布大模型时代AI存储新品,为基础模型训练、行业模型训练、细分场景模型训练推理提供存储“最优解”。
华为数据存储产品线总裁周跃峰表示,企业在开发及实施大模型应用过程中面临四大挑战:第一,数据准备时间长,数据来源分散,归集慢,预处理百TB数据需10天左右;第二,多模态大模型以海量文本、图片为训练集,当前海量小文件的加载速度不足100MB/s,训练集加载效率低;第三,大模型参数频繁调优,训练平台不稳定,平均约2天出现一次训练中断,需要Checkpoint机制恢复训练,故障恢复耗时超过一天;最后,大模型实施门槛高,系统搭建繁杂,资源调度难,GPU资源利用率通常不到40%。
华为针对不同行业、不同场景大模型应用,推出OceanStor A310深度学习数据湖存储与FusionCube A3000训/推超融合一体机。其中,OceanStor A310深度学习数据湖存储,面向基础/行业大模型数据湖场景,实现从数据归集、预处理到模型训练、推理应用的AI全流程海量数据管理。FusionCube A3000训/推超融合一体机,面向行业大模型训练/推理场景,针对百亿级模型应用,集成OceanStor A300高性能存储节点、训/推节点、交换设备、AI平台软件与管理运维软件,为大模型伙伴提供拎包入住式的部署体验,实现一站式交付。
倪光南院士表示,在媒体专访中,他强调数据已成为国家战略中的重要资源。数据存储能力(简称“存力”)和信息计算能力(简称“算力”)、网络运载能力(简称“运力”)都是我国信息产业发展的核心和基础,是建设科技强国的战略支撑。他相信,储能将成为国家的战略性和基础性行业,并成为新的国际竞争制高点。
“大模型时代,数据决定AI智能的高度。作为数据的载体,数据存储成为AI大模型的关键基础设施。”周跃峰在会后接受采访时表示,中国人工智能产业要高速发展,一定要重视数字化,重视数据和信息数字化的记录。在AI大模型实施过程中,数据的准备是最具挑战性的问题。据他所说,AI大模型的成本主要由算力占了大约25%,而购买服务器、数据清洗、预处理等工作的成本大约占据了22%。可见,数据以及数据的存储、处理过程变得越来越重要了。这个重要不仅仅说它的数据量变大了,更多的是在这个数据处理过程更加的复杂。据华为分布式存储领域副总裁韩振兴表示,未来国内将迎来大量存力中心,并且会涌现出更高性能的存储产品。
今天关于《华为发布两款AI存储新品》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
420 收藏
-
293 收藏
-
416 收藏
-
112 收藏
-
426 收藏
-
332 收藏
-
289 收藏
-
102 收藏
-
318 收藏
-
370 收藏
-
346 收藏
-
487 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习