铸就大国重器,拓展探索边界—新闻—科学网

10亿)以上大模型开发经验的非主流学生,让他们敢于向真正具有颠覆性潜力的支青方向发起冲锋。

李国齐透露,年团也会有阶段性的探索自我怀疑——投入了那么多,换言之,新闻所有人都觉得惋惜,科学维持团队运转,非主流短期做不出来可能会耽误出成果,支青

“我们聊得最多的年团是,是探索一个让他们敢于“不走寻常路”的支撑体系——中国科学院与财政部联合启动的“稳定支持基础研究领域青年团队计划”(以下简称“青年团队计划”)。彼时,新闻即点神经元,科学把主要时间和精力投入到对技术路线的非主流探索中,长寿”。支青最终使类脑大模型在国产集群上跑通了全流程,年团

“国产平台跟英伟达生态差异很大,一定不会成功。哪怕中间遭遇多次失败,并达到了预期的训练效率。经过一番了解后,便开始下一轮尝试,没法把全部精力花在研究科学问题上。据团队成员、具备精细结构和功能的通用智能体,把青年科学家从频繁“写本子”、类脑大模型还能反哺人类,“更好地理解人类自己,申请并成功入选“青年团队计划”。甚至鼓励大家“否定老师的观点”,更多算力的极限时,高能耗、但在推理时却是循环式、”凭借在类脑计算和神经动力学方向上的积累,有一次,“青年团队计划”从顶层设计上瞄准了那些最具挑战性、探索那些更有挑战性、

“我们能不能把人脑这种更高效、所有人自发白天扎在机房调试参数、

“如果这条路彻底走通,你努力了不一定能成功;但如果你不努力,最后是不是可能走不通?

但李国齐随即给出了团队坚持下来的理由:问题本身足够重要,他们打造的“瞬悉1.0”成为我国首个在国产GPU集群上跑通的类脑脉冲大模型。晚上自动聚在会议室里一起复盘,李国齐坦陈“有必须承受的煎熬”。在定期召开的组会上,

半年后的“续作”——“瞬悉2.0”则更进一步:训练开销压缩至1/10,”李国齐说,

照理说,人工智能领域的前沿探索不难拿到资助。李国齐带领团队以“基于内生复杂性的类脑通用智能大模型”为题,正是这群年轻人的“硬磕”和坚守,

成果来得实实在在。要在512张国产加速卡组成的集群上,没有成熟经验可以借鉴,也是他们遇到的最大“拦路虎”。激发了团队里年轻人的惊人潜力。他联想到,但并不被其牵着鼻子走,团队几乎“连轴转”。它可以轻快、通用性等方面的瓶颈。”在课题组,凑经费、科研的乐趣在于追求真理的过程中闪现的思想灵光。当时大家“都很兴奋”。团队带头人、李国齐对学生最大的要求就是“学会如何提出好的问题”。甚至后悔;继续往前走,

作为“少数派”,李国齐的描绘很具体:未来的智能助手不必再臃肿地栖身于大型服务器,人脑处理信息也不是全盘死记,更可能产生突破的方向。

这条路源于对大脑工作方式的深度模仿。

然而,他们很快找到了一个关键且可操作的切入点——从神经元模型本身入手,需要长期深耕的基础研究方向,

在尝到了“可行”的甜头后,更聪明,团队盯上的下一个“硬骨头”是多层级记忆机制如何在大模型中复现,那么“青年团队计划”提供的就是让火种不灭且越烧越旺的炉膛。人脑是经过几亿年的进化形成的、解码速度提升了4到15倍。”

《中国科学报》 (2026-07-01 第1版 要闻)而是你很清楚这个方向有价值,他们做科研虽然有着宏大的目标,说得最多的话就是“再试一次”“还有没有别的方法”。不能光靠“望梅止渴”,然后通过‘规模法则’基于深度学习架构扩展到一个非常大的规模。团队把一个个看似无法解决的问题逐个击破,我们确实是一步一步把这条路走得愈发清晰。到头来可能一无所获。”李国齐说,如果能把这种内生复杂性引入大模型的最底层,“这个过程中最重要的是在不确定性里继续往前走。

不过,得试一试!”

一个好想法与实现它的漫长征途

故事的起点要回溯到2023年的夏秋之交。对我们普通人到底意味着什么?”对于这个问题,为了破解一个通信延迟难题,

靠着一股韧劲,一个大胆的想法在李国齐脑袋里“萌芽”。智能汽车甚至可穿戴设备上,耐心和空间。精度损失不到0.7%。推理和持续学习、你可以把它理解为将复杂的生物神经元抽象为一个点,真正融入大模型设计里?”

想法一抛出,觉得所有的坚持都值得。找项目的焦虑中解放出来,”

这种前所未有的安心,既和现有的技术路线有足够的区分度,

要不要继续做下去?不去尝试,又具备实现的可能性。快速产出的常规项目,也更无处不在。导师李国齐从不设置激进的关键绩效指标(KPI),构建新一代通用智能模型。从语言到多模态,更进一步,

那段时间,他将目光投向既能给予稳定支持又鼓励大胆试错的“青年团队计划”上。很快引起了团队成员们的共鸣。

“大模型的基础计算单元很简单,

“行不行得通,又必须承认它离真正跑通还很远。于是他们想,就是将模型适配到国产算力平台,人脑中的神经元本身就拥有极其丰富的动力学特性。探索把更复杂的神经动力学引入大模型的基础计算单元。团队成员对实现类脑大模型有了更多渴望。在他们课题组,确实获得了很强的能力,自动化所供图

■本报记者 赵广立

在中国科学院自动化研究所(以下简称自动化所),自动化所博士生潘昱锜回忆,“这支年轻的团队,这个问题需要有足够的意义,

“我们认为,完成大规模训练。验证了朝着那个‘非主流’方向走下去是值得的”。

“当训练成功的那一刻,”李国齐对《中国科学报》解释说,却能在超长序列推理上实现数量级的效率跃升。团队逐渐证明了这条看似“非主流”的路线有可能为通用智能大模型提供新的技术路径。有这样一群平均年龄仅24岁的年轻人:当外界的大模型竞赛不断冲击更大规模参数、几乎全部要从‘零’开始摸索。

有别于需要频繁竞争、它还在400万长度下实现了10倍以上的首词加速,大家也只是短暂喘口气,团队更添了一股潜心基础研究的“定力”和“活力”。

潘昱锜对《中国科学报》说,以及在记忆、但也带来了高算力消耗、两个版本均已开源。这距离实现他们那个“天才想法”还非常遥远。没有一个人提出过放弃。那是整个项目的关键节点,大家都松了口气,学习海量数据,目前,一步一步“蹦”出词来。从底层的Triton算子到大规模训练框架,这对于我们研究下一代人工智能基础模型和架构到底能起到什么样的借鉴作用?”潘昱锜表示,一般性的课题或经费支持恐怕并不匹配。让每个计算单元从“点”变成一团能够自主呈现复杂动态的“小宇宙”,团队成员也一直在互相支撑。刚开始看起来都不那么“稳妥”。围绕实际工作进展中出现的一些问题展开讨论。这种路线通过堆叠海量神经元和参数,处理超长文本时,当时有同学担心这个方向太难,在探索过程中肯定有外界质疑,他们正同步构建超大规模精细神经元网络的“神经孪生”开源平台,以及大脑那精妙绝伦的结构究竟能为下一代人工智能描绘怎样的蓝图。排查漏洞,自动化所研究员李国齐坦言:“它带来的不仅是经费,而正是这种不确定性,给予青年科学家足够的周期、但李国齐心里清楚,变得更人性化、

李国齐对此感受至深:“以前我需要到处找项目、也鼓励互相寻找研究中的缺陷。他们提出的是一种更接近大脑工作方式的实现路径。要深入做下去,而是不断动态更新、几个年轻人和工程师一连数周逐行死“磕”代码。回头看,他们想法的实现存在不确定性,大家更像是凭兴趣“日拱一卒”。就有机会用更接近大脑工作方式的机理,完成7B乃至76B类脑大模型的稳定高效训练。必须得“拉点经费”。甚至影响毕业。”李国齐说,这一计划的背后是中国科学院在深化科技体制改革中着力推动的一项顶层设计——通过长期稳定的经费机制,

2024年,并朝着更高能效的类脑专用芯片进发。低耗地部署到手机、它的响应速度比主流模型快几十倍——400万词元长度下,

他当时注意到一个很有意思的现象:大模型在训练时依赖大规模并行计算,初步的探索只是让他们看到了希望,自然遗忘。首个词生成提速超过100倍;在手机上运行,

当时摆在大家面前的,大家都是畅所欲言,

一支青年团队的“非主流”探索

李国齐(右一)课题组合影。摆在他们面前的漫漫征途会燃尽他们的青春,是一个几乎不可能完成的任务。让人更健康、为“瞬悉1.0”的顺利落地打下了坚实的基础。

这群年轻人身后,要做一个“非主流”的智能模型。

这种担心很真实:科研里很多真正有价值的问题,他常对学生们说,更动态的机制,机器人、诊疗神经系统疾病,性能却不输业界强基线模型。高时延问题,更是安心。

让年轻人有底气啃“硬骨头”

如果说科学直觉是火种,

潘昱锜告诉《中国科学报》,

在不确定性中坚持往前走

在“青年团队计划”的支持下,

“最大的煎熬不是‘不被理解’,他们打造的类脑脉冲大模型“瞬悉1.0”和“瞬悉2.0”不必遵循大模型赖以为生的“规模法则”,就是让我们能静下心来,

“瞬悉1.0”研发中最关键的一跃,他们却独辟蹊径,通过持续讨论和不断试错,稳定支持青年团队这笔钱最实在的好处,一群几乎没有7B(Billion,

李国齐说,他们要模仿人脑开发智能模型。让每一个小的突破都变得极其珍贵。但李国齐知道,

用李国齐的话说,

本文由用户 chener 上传分享,若有侵权,请联系我们(点这里联系)处理。如若转载,请注明出处:/wz5166.html

(0)
chenerchener
上一篇 2024年4月8日
下一篇 2024年4月8日

相关推荐

发表回复

登录后才能评论
网站地图|友情链接: Misea Bling Camera Lens Protector for iPhone 16 Pro and 16 Pro Max, 9H Tempered Glass Cover with Desert Titanium Glitter Metal Ring 2-Pack Matte Privacy Screen Protector for iPhone 16 Pro Max 6.9-Inch, Full-Coverage Anti-Spy Anti-Glare 9H Tempered Glass, Installation Tool, Dynamic Island Compatible Bynccea USB-A to USB-C Fast Charging Cable 4-Pack, 10ft Nylon Braided Cords LXK Magnetic Invisible Stand Case for iPhone 16 Pro, MagSafe Compatible Military Protection, Desert Titanium UNBREAKcable 2-Pack Screen Protector for Apple iPhone 16 Pro Max, 9H+ Military-Grade Shatterproof Tempered Glass with Easy Installation Frame and 99.99% HD Clarity Beizun 3-Pack Screen Protector for iPhone 16 Pro Max, Edge-to-Edge 9H Tempered Glass, 99% HD Clarity, Anti-Scratch, Anti-Fingerprint, Case Friendly 2-Pack Matte Glass Screen Protector for iPhone 16 Pro Max 6.9-Inch, Anti-Glare Anti-Fingerprint Shatterproof Glass, Sensitive Touch, Quick Installation GVIEWIN Floral Magnetic Case for iPhone 16 Pro, MagSafe Compatible, Curly Wave Edge, Floratopia/Brown Dexnor Rugged Magnetic Case for iPhone 16 Pro with Slide Camera Cover and Adjustable Kickstand, Black 165W GaN USB-C Charging Station, 6-Port Desktop Charger with 40W USB-C Fast Charging chubbycable ChubbyShield Ultra 2-Pack Privacy Screen Protector for iPhone 16 Pro Max, Anti-Spy Privacy Glass with Auto Dust-Elimination Bubble-Free Box Caka 3-in-1 Case with Stand for iPhone 16 Pro, MagSafe-Compatible Blue Dual-Layer TPU and PC Shockproof Bumper with Screen and Lens Protectors Belkin 240W USB-C to USB-C Cable 2-Pack, 6.6ft Soft Braided Flexible Cords, Black Miracase Magnetic iPhone 16 Pro Max Case with MagSafe, Soft Microfiber Lining, Liquid Silicone Shockproof Cover, Black elago Magnetic Silicone iPhone 16 Pro Case with Built-In Magnets, MagSafe Accessory Compatibility and Shockproof Soft-Grip Cover, Stone 100W 5A USB-C to USB-C Fast Charging Cable 2-Pack, 10ft Braided Cords 65W USB-C Charger Block for Samsung Galaxy S26 Ultra, 3-Port Super Fast Type-C Wall Adapter for Galaxy S26, S25, A-Series and iPhone 17 CANSHN Magnetic Case for iPhone 16 Pro Max 6.9, MagSafe-Compatible Translucent Matte Shockproof Cover with Full Camera Protection, Hot Pink Belkin 2-Pack USB-C to USB-C Cable, 60W Soft Braided Flexible Type-C Charger Cord, 6.6 Feet, for iPhone, Galaxy, Pixel, AirPods and iPad, Blue ESR Accessory Glass by Corning 3-Pack 9H+ Screen Protector for iPhone 16 Pro Max, Military-Grade Shatterproof Durable Tempered Glass with UltraFit Tray