AI大模型非常昂贵 只有大企业和超级富豪才能玩得转
来源:51CTO.COM
时间:2023-04-15 20:12:23 191浏览 收藏
“纵有疾风来,人生不言弃”,这句话送给正在学习科技周边的朋友们,也希望在阅读本文《AI大模型非常昂贵 只有大企业和超级富豪才能玩得转》后,能够真的帮助到大家。我也会在后续的文章中,陆续更新科技周边相关的技术文章,有好的建议欢迎大家在评论留言,非常感谢!
ChatGPT大火带动AI又一波热潮,不过业界普遍认为,当AI 步入大模型时代,只有大企业和超级富有的企业才玩得起AI,因为AI大模型的打造非常昂贵。
首先是计算昂贵。多伦多大学市场营销教授Avi Goldfarb说:“如果你想创办一家企业,自己开发大语言模型,自己计算,成本太高了。OpenAI是很贵的,要数以十亿计的美元。”租赁计算当然会便宜不少,但企业仍然要向AWS等企业支付昂贵费用。
其次是数据昂贵。训练模型需要海量数据,有时数据是现成的,有时不是。Common Crawl和LAION等数据可以免费使用,对于此类数据,成本主要来自数据清理和处理,成本变化很大,可能是几百美元,也可能是几百万美元。
Glean公司创始工程师Debarghya Das说,在美国,根据大语言模型论文做一些粗略的数学计算,如果用的是Facebook LLaMA,训练成本(不考虑迭代或者出错)大约是400万美元,如果是谷歌PaLM,大约2700万美元。
即使用的是免费数据,成本也不低。Hugging Face公司研究人员Sasha Luccioni说:“当你下载容量达到TB的数据,如果想过滤或者以某种特殊方式利用数据,比如用文本-图片模型处理(研究人会专注于某些数据子集,这样模型才会变得更好),整个过程相当棘手。”需要强大的计算力,需要大量专业人士。
再次,专业人才的聘请费用也很高。Debarghya Das在做上述估算成本时没有考虑人力成本。Sasha Luccioni指出:“机器学习专业人士的薪酬很高,因为要与谷歌及其它科技巨头争夺人才,有时一位专业人才可能要几百万美元。”2016年OpenAI最顶级的研究人员薪酬约为190万美元。
并且,训练模型、聘请专业人士的成本不是一次性的,是持续的。例如,如果开发的是客服聊天机器人,每周或者每几周就要优化。模型还要经受压力测试,确保它生成的答案不出错。正如Sasha Luccioni所解释:“最贵的成本来自持续性工作,必须持续测试模型,必须确保AI所做的和预期一样。”
最后,持续运转费用也不低。当一切准备妥当,模型向公众开放,每天要接受成千上万次询问,此时要确保模型可扩展、高度稳定,维护成本也很高,且需要专业人士来处理。
今天带大家了解了的相关知识,希望对你有所帮助;关于科技周边的技术知识我们会一点点深入介绍,欢迎大家关注golang学习网公众号,一起学习编程~
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
221 收藏
-
276 收藏
-
298 收藏
-
489 收藏
-
438 收藏
-
379 收藏
-
483 收藏
-
183 收藏
-
479 收藏
-
379 收藏
-
391 收藏
-
364 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习