-
MoE架构:大模型训练的未来方向?MoE(MixtureofExperts,混合专家)架构在大模型训练和推理中的应用,引发了业界对其未来发展方向的广泛讨论。本文将深入探讨MoE架构的优势、挑战以及在行业中的应用现状。MoE的核心在于其模块化的稀疏激活机制。不同于OpenAI的GPT系列和Meta的Llama系列等稠密模型(所有参数都参与计算),MoE模型仅激活部分参数(“激活参数”),从而降低计算成本。MoE通常基于Transformer架构,通过对前馈神经网络(FFN)层进行横向扩展,将其参数划分成多个
-
三菱汽车社长加藤隆雄近日在采访中表示,加入本田与日产汽车的经营合并谈判是“一种可能性”。他指出,在车载软件开发等领域,可以充分利用两家公司的技术优势,尤其是在三菱汽车目前没有生产基地的北美市场,这或许能带来业务突破。本田和日产于2024年12月宣布启动全面经营合并谈判。三菱汽车此前已声明将在1月底之前决定是否加入。预计本田和日产将在明年6月签署正式合并协议,并在2026年4月获得股东批准。有媒体报道指出,本田和日产的车型系列互补性较低,重叠度较高。例如,在美国轿车市场,本田雅阁(Accord)与日产Alt
-
OpenAIo1的突破为增强自然语言大模型(LLM)的推理能力,拓展其应用潜力指明了方向。然而,当前大多数推理研究集中于数学领域,医学等专业领域的应用仍有待深入探索。医学领域对可靠答案的依赖性极高,因此需要强大的推理能力。但与数学不同,医学推理的验证难度较大。为解决这一难题,香港中文大学和深圳市大数据研究院的研究人员提出了一种基于可验证医学问题和医学验证器的评估方法。他们开发了HuatuoGPT-o1,这是一个能够进行复杂医学推理的LLM。令人瞩目的是,该模型仅使用40,000个可验证问题进行训练,便超越
-
北京大学电子学院陈景标教授团队在量子锁模法拉第激光器研究方面取得重大突破,首次运用原子滤光器作为可饱和吸收体,成功实现了法拉第激光器的锁模运行。该激光器生成的脉冲光谱精准匹配原子的量子跃迁频率,且重复频率可通过法拉第慢光效应调节,为高精度原子多频光谱技术开辟了新的应用前景。研究成果已发表在AIP出版社的《AppliedPhysicsLetters》期刊上,并被选为“编辑精选”文章。图1论文截图传统锁模激光器主要致力于产生宽光谱、高能量的短脉冲,常用的锁模元件(如SESAM、CNT、石墨烯、黑磷
-
瑞华泰发布2024年业绩预告,预计净利润亏损5.3亿元至6.8亿元,同比大幅增加。预告显示,公司2024年预计归属于母公司所有者的净利润亏损5,300万元到6,800万元,较2023年同期亏损增加170.37%到246.89%;扣除非经常性损益后的净利润亏损预计为5,400万元到6,900万元,同比亏损增加146.71%到215.24%。2023年,公司净利润为-1,960.30万元,扣非净利润为-2,188.80万元。瑞华泰解释称,亏损增加主要由于行业竞争加剧、市场需求调整以及嘉兴项目产能爬坡阶段
-
合肥天盾信创:空天信息安全领域的逐梦者“空天”一词,对普通人而言既遥远又贴近。我们日常使用的导航、天气预报、遥感技术,都离不开空天信息技术的支撑。作为航空航天技术与信息通信技术融合的新兴产业,空天信息产业正蓬勃发展。合肥,凭借其产业和创新优势,正力图将空天信息产业打造为城市名片。科大硅谷的积极布局,吸引了众多空天企业入驻,天盾信创便是其中之一。从信息安全梦到空天逐梦天盾信创总经理孔祥宇毕业于解放军信息工程大学,长期从事信息安全工作。2016年,他投身信息安全企业,希望将所学应用于实践。在中科院空天信息创新
-
比亚迪胜诉!法院判决“龙猪-集车”等账号赔偿201.87万元12月27日,比亚迪法务部发布消息称,已成功胜诉,法院判决自媒体账号“龙猪-集车”及其关联账号需删除侵权内容、公开道歉,并赔偿比亚迪201.87万元经济损失及相关费用。法院认定,“龙猪-集车”长期发布恶意诽谤、诋毁比亚迪的言论,严重歪曲事实,构成对比亚迪名誉权的侵犯。比亚迪声明:公司欢迎社会各界的监督和建议,但网络并非法外之地。对于任何形式的网络侵权行为,包括侮辱、造谣、诽谤等,比亚迪将坚决运用法律手段维护自身合法权益。比亚迪集团品牌及公关处总经
-
新思科技收购Ansys获欧盟委员会批准,三星SDI携手高校培养电池人才,HPE斩获X公司10亿美元AI服务器订单——科技巨头最新动态速览!1.新思科技收购Ansys交易有望于2025年上半年完成欧盟委员会(欧委会)已批准新思科技收购Ansys的交易,标志着这笔旨在促进市场竞争的收购案向前迈进一大步。新思科技表示,目前在全球各地的监管审批程序中均取得了显著进展,并预计交易将在2025年上半年完成。此前,英国竞争与市场管理局已原则上同意新思科技提出的救济措施。中国国家市场监督管理总局也已正式受理该案,目前正在
-
2024年12月28日,安徽省人工智能产业先导区启动仪式上,智象未来科技有限公司重磅发布智象多模态生成大模型3.0和智象多模态理解大模型1.0。上海电影集团、中国移动咪咕音乐、科大讯飞等行业巨头纷纷出席,共同见证这一里程碑时刻。加拿大工程院外籍院士、智象未来创始人兼CEO梅涛在现场发表了精彩演讲。梅涛指出,2024年是人工智能技术蓬勃发展的一年,涌现出多个标志性事件。2024年人工智能领域五大标志性事件梅涛总结了2024年人工智能领域的五大突破:Sora的横空出世标志着视觉生成技术的重大飞跃;GPT-4o
-
屡获殊荣的Ceva-NeuPro-Nano32和64MACNPU以优越性能满足嵌入式人工智能工作负载;面向端到端人工智能应用开发和部署的Ceva-NeuProStudio提供支持。帮助智能边缘设备更可靠、更高效地连接、感知和推断数据的全球领先半导体产品和软件IP授权许可厂商Ceva公司(纳斯达克股票代码:CEVA)宣布屡获殊荣的Ceva-NeuPro-Nano嵌入式AINPU在人工智能物联网(AIoT)和MCU市场势如破竹,赢得多家客户采用,并且带有涵盖人工智能和嵌入式应用整个软件设计周期的增强型开发套件
-
中国长城发布2024年度业绩预告,预计净亏损1.1亿至1.52亿元人民币,同比下降12.56%至55.54%;扣除非经常性损益后的净亏损预计为1.07亿至1.48亿元人民币,同比增亏25.37%至减亏9.36%。业绩变动主要原因如下:市场竞争加剧、行业政策调整及产业周期波动导致公司毛利率下降,盈利能力承压。为聚焦主营业务,加快转型升级,公司主动调整业务结构,短期内增加部分成本费用。基于谨慎性原则,公司对资产进行全面检查和减值测试,计提相关减值准备。公司持续加大科技创新投入,保障研发资源,推动核心技术创新,
-
2024年第52周(12月23日至12月29日),小米汽车单周销量达0.67万辆,创下历史新高!这一数据来自理想汽车官方发布的信息。目前,小米汽车在造车新势力中暂居第七位,领先品牌包括理想、小鹏、零跑、极氪、问界和深蓝。具体销量数据如下:值得关注的是,据第三方数据显示,小米汽车12月交付量突破2万辆,但新增订单却超过3万辆,这意味着“北京欠车王”的欠车数量再次增加。汽车博主统计显示,截至12月29日,小米汽车累计欠车量已达12.62万辆,而其过去8个月的总交付量约为13万辆。预计2024年全年交付量可能达
-
近日,又有国外车企放缓了电动化转型的脚步。据外媒报道,克莱斯勒电动SUV项目再度推迟,原定于明年发布的车型将需要更长时间才能面世。报道称,负责该电动车的供应商已接到通知,要求立即停止相关投入,因为该项目已经“暂停,直到另行通知”。这一信息标志着克莱斯勒电动SUV计划的又一次延期。 该电动SUV项目的内部代号为C6X(CA),最初克莱斯勒计划将其打造成一款量产版的Airflow概念车。然而,在开发周期中期,也就是18个月后,克莱斯勒决定彻底重设计,放弃了最初的设计思路。根据Stellantis设计主管
-
信濠光电发布2024年业绩预告,预计净亏损29亿-35.5亿元。公告显示,公司2024年预计归属于上市公司股东的净亏损将在29,000万元至35,500万元之间,扣除非经常性损益后的净亏损则为30,000万元至36,700万元。这与2023年4,050.02万元的净利润(扣非后669.15万元)形成鲜明对比。信濠光电将业绩下滑归因于以下几个因素:光伏行业深度调整以及海外新能源市场价格波动,导致公司亏损加剧,存货减值增加。客户合力泰重整及回款逾期等问题,导致公司2024年度计提了较多的信用减值准备。全资子公
-
深圳基本半导体有限公司近日公布一项关于碳化硅基集成SBD和SGT器件及其制备方法的专利(申请公布号:CN119049972A,申请公布日:2024年11月29日)。该专利公开了一种新型制备方法,有效解决了现有碳化硅沟槽型MOSFET器件沟槽底部栅氧化层易击穿的难题。其核心在于改进的器件结构和制备工艺,具体步骤包括:在N型碳化硅衬底上生长N型外延层并形成漏极金属层;在N型外延层表面特定区域注入P型和N型杂质,形成相邻的N型掺杂区域和第一P型掺杂区域;通过光刻工艺刻蚀形成沟槽;在沟槽内依次生成第一栅极氧化层、