-
研究者表示,如果Sytem2蒸馏可以成为未来持续学习AI系统的重要特征,则可以进一步提升System2表现不那么好的推理任务的性能。谈到大语言模型(LLM)的策略,一般来说有两种,一种是即时的System1(快速反应),另一种是System2(慢速思考)。其中System2推理倾向于深思熟虑的思维,生成中间思维允许模型(或人类)进行推理和规划,以便成功完成任务或响应指令。在System2推理中,需要付出努力的心理活动,尤其是在System1(更自动化思维)可能出错的情况下。因此,System1被定义为Tr
-
编辑|KXAI技术在辅助抗体设计方面取得了巨大进步。然而,抗体设计仍然严重依赖于从血清中分离抗原特异性抗体,这是一个资源密集且耗时的过程。为了解决这个问题,腾讯AILab、北京大学深圳研究生院和西京消化病医院研究团队提出了一种预训练抗体生成大语言模型(PALM-H3),用于从头生成具有所需抗原结合特异性的人工抗体CDRH3,减少对天然抗体的依赖。此外,还设计了一个高精度的抗原-抗体结合预测模型A2binder,将抗原表位序列与抗体序列配对,从而预测结合特异性和亲和力。总之,该研究建立了一个用于抗体生成和评
-
AIxiv专栏是本站发布学术、技术内容的栏目。过去数年,本站AIxiv专栏接收报道了2000多篇内容,覆盖全球各大高校与企业的顶级实验室,有效促进了学术交流与传播。如果您有优秀的工作想要分享,欢迎投稿或者联系报道。投稿邮箱:liyazhou@jiqizhixin.com;zhaoyunfeng@jiqizhixin.com在生成式模型的迅速发展中,ImageTokenization扮演着一个很重要的角色,例如Diffusion依赖的VAE或者是Transformer依赖的VQGAN。这些Tokenizer
-
编辑|萝卜皮理解蛋白质功能并开发分子疗法,需要确定蛋白质发挥作用的细胞类型,并解析蛋白质之间的相互作用。然而,对跨生物背景的蛋白质相互作用进行建模,对于现有的算法而言仍然具有挑战性。在最新的研究中,哈佛医学院的研究人员开发了PINNACLE,这是一种生成情境感知蛋白质表征的几何深度学习方法。PINNACLE利用多器官单细胞图谱,在情境化蛋白质相互作用网络上进行学习,从24种组织的156种细胞类型情境中生成了394,760种蛋白质表征。该研究以「ContextualAImodelsforsingle-cel
-
近日,在2024Inclusion・外滩大会“超越平面思维,图计算让AI洞悉复杂世界”见解论坛上,蚂蚁集团知识图谱负责人梁磊分享了“构建知识增强的专业智能体”相关工作,并带来了知识图谱与大模型结合最新研发成果——知识增强大模型服务框架KAG。梁磊介绍,专业领域增强大模型服务框架KAG通过图谱逻辑符号引导决策和检索,显著提升了垂直领域决策的精准性和逻辑严谨性;通过信息检索可补全知识图谱的稀疏性和知识覆盖的不足,同时充分利用大语言模型的理
-
语言模型真的能用于时序预测吗?根据贝特里奇头条定律(任何以问号结尾的新闻标题,都能够用「不」来回答),答案应该是否定的。事实似乎也果然如此:强大如斯的LLM并不能很好地处理时序数据。时序,即时间序列,顾名思义,是指一组按照时间发生先后顺序进行排列的数据点序列。在很多领域,时序分析都很关键,包括疾病传播预测、零售分析、医疗和金融。在时序分析领域,近期不少研究者都在研究如何使用大型语言模型(LLM)来分类、预测和检测时间序列中的异常。这些论文假设擅长处理文本中顺序依赖关系的语言模型也能泛化用于时间序列数据中的
-
8月21日,2024世界机器人大会在北京隆重召开。商汤科技旗下家用机器人品牌“元萝卜SenseRobot”家族全系产品集体亮相,并最新发布元萝卜AI下棋机器人——国际象棋专业版(以下简称“元萝卜国象机器人”),成为全球首个走进家庭的国际象棋机器人。作为元萝卜的第三款下棋机器人产品,全新的国象机器人在AI和工程机械方面进行了大量专项技术升级和创新,首次在家用机器人上实现了通过机械爪拾取立体棋子,并进行人机对弈、人人对弈、记谱复盘等功能,
-
机器之能报道编辑:Sia工牌也能疯。还记得篇篇10万+的打工人「发疯」文案么?喜欢各种爆改的年轻人,最近又开辟了「工位精装修」新赛道。作为打工人每天停留最长甚至是「唯二」停留的地方,爆改可以提供「情绪价值。」除了置办各种潮玩和手办,爆改工位文案也成了新热点。赵钱孙李、周吴郑王、都能将姓氏融入谐音梗,打造充满「疯感」的自我介绍。不是你死就是我「王」,吓唬谁呢!我真的会「谢」……加班加到半「叶」?「李」行你上啊!还真对得上。技高一筹的文案更是融大IP于无形!「崔啊崔啊」「我的骄傲放
-
智谱大模型团队自研打造。自从快手可灵AI火爆海内外,国内视频生成也如同2023年的文本大模型一样,越来越卷了。刚刚,又一视频生成大模型产品宣布正式上线:智谱AI正式发布「清影」。只要你有好的创意(几个字到几百个字),再加上一点点耐心(30秒),「清影」就能生成1440x960清晰度的高精度视频。即日起,清影上线清言App,所有用户都可以全方位体验对话、图片、视频、代码和Agent生成功能。除了覆盖智谱清言的网页端和App,你也可以在「AI动态照片小程序」上进行操作,快速为手机里的照片实现动态效果。智谱「清
-
具身智能的数据从这里来。明天,一年一度的世界机器人大会又将拉开序幕!最近,国内很多机器人公司都发布了新产品,比如稚晖君「智元机器人」公司的第二代人形机器人、星尘智能发布的新一代AI机器人助理AstribotS1。在国外,特斯拉在其人形机器人Optimus训练方面也有了新的消息。该公司正在招募人员穿上动作捕捉服来模仿预期动作,以获得所需的大量机器人训练数据。特斯拉在其招聘网站上将此类人员定义为「数据采集操作员」,主要目标是采集数据、协助处理工程请求以及报告设备反馈。据了解,该职位的时薪最高可达48美元,还有
-
技术的飞速发展,正在让人形机器人从形态的“拟人化”逐步转向功能的实用性,以此来加速产品商业化和市场扩展。NVIDIA一直在积极研究和开发人工智能和机器人技术,尤其是在人形机器人领域,NVIDIA致力于通过NVIDIAIsaac、NVIDIAJetson等平台加速全球人形机器人的发展和创新。为了加速全球人形机器人的发展,在SIGGRAPH2024上,NVIDIA正式宣布为全球机器人制造商、AI模型开发者和软件制造商提供一套服务、模型以及计算平台,以开发、训练和构建下一代人形机器人。整套产品包括用于机器人仿真
-
有人说,「我们期待的是草莓,但他们发布的是羽衣甘蓝。」我们来看看这个「羽衣甘蓝」是做什么用的。一直以来,大模型的编程能力都备受关注,超强AI程序员Devin的问世更是将「AI能否替代程序员」这一话题推上了风口浪尖。最近,Devin也迎来了新对手——初创公司Cosine推出的自主AI程序员Genie。该公司表示,Genie的表现轻松超越了Devin,在第三方基准测试SWE-bench上的得分为30%,而Devin的得分仅为13.8%。这个SWE-Bench是一个用于评估LLM解决Gi
-
基于Transformer架构的大型语言模型在各种基准测试中展现出优异性能,但数百亿、千亿乃至万亿量级的参数规模会带来高昂的服务成本。例如GPT-3有1750亿参数,采用FP16存储,模型大小约为350GB,而即使是英伟达最新的B200GPU内存也只有192GB,更不用说其他GPU和边缘设备。大模型压缩,即将大模型“瘦身”后塞进资源受限的场景,以减少模型存储、访存和计算开销。在尽量不损失模型性能的前提下,提高大模型推理吞吐速度,使大模型在物联网边缘设备、嵌入式机器人、离线移动应用等
-
在奥数问题面前,AI的「智商」往往不太够用。不过,这已经是过去式了。谷歌DeepMind用AI做出了今年国际数学奥林匹克竞赛IMO的真题,并且距拿金牌仅一步之遥。对于AI来说,奥数不再是问题了。IMO2024中六个问题的每一个问题满分为7分,总分最高42分。DeepMind的系统最终得分为28分,意味着解决的4个问题都获得了满分——相当于银牌类别的最高分。1.DeepMind文章连接:https://deepmind.google/discover/blog/ai-solves-i
-
随着无人驾驶技术的飞速发展,无人驾驶出租车已经在多个城市实现了商业化运营,其火爆程度有目共睹。无人驾驶技术正以高效、便捷的特点满足人们的新需求,推动行业的转型升级,这一技术的推广应用正以前所未有的速度改变着我们的生活方式,也为无人驾驶技术在其他领域的商业化落地提供了经验。在工程机械施工行业,面对传统人工操作与半机械化作业方式日益凸显的局限,如施工效率低下导致的项目进度拖延、安全隐患频发对工人生命安全构成的威胁,以及高昂的人力成本不断压缩企业的利润空间,这些挑战已成为制约行业高质量发展的瓶颈。因此,行业内外