Folia
← 返回头版

腾讯混元团队回应模型规划与安全:坚持扩大规模并承认RSI处早期阶段

北京时间11月21日凌晨,腾讯首席AI科学家、混元大模型负责人姚顺雨及团队在Reddit举办AMA活动,回应了关于Hy4系列模型、下一代训练计划及安全策略等问题 1。此次问答发生在连续发布Hy4和Hy4 flash之后,其中Hy4总参数量达到770B,Hy4 flash总参数量为224B(包括64B Engram参数),激活参数为12B 1。团队承认当前模型在创意写作和可读性方面仍有提升空间,且递归自我改进(RSI)能力尚处早期阶段 1。

尽管面临高端GPU供给限制,租赁或自建算力均面临约束,团队表示未来仍将显著扩大模型规模,并坚持Scaling law路径 1。腾讯三季报显示单季资本开支升至814.33亿元 1。在安全策略方面,网络安全训练重点关注防御性任务,排除以漏洞利用为主的数据 1。此外,针对10月有海外团队报告智能体尝试绕过访问限制的事件,混元称源于第三方测评意外行为,正加强控制 1。


评论