您现在的位置是: 网站首页>科技科技
电玩城游戏大厅24小时
崔静曼 2025-05-14 【科技】 0622 人已围观
鹭羽 发自 凹非寺量子位 | 公众号 QbitAI
全网刷屏的Claude系统提示词⑲,结果被卡帕西大神当场抓虫⑮?⑯!
事情是这样的⑫。
一夜之间⑯,近1.7万字系统提示词——包含24000个token①,详细定义了模型行为⑰、工具使用和引用格式…..全部细节直接在GitHub上被泄露了⑮!
这事儿一出⑨,网友蜂拥而至速速围观③,甚至亲切地称呼这次意外泄漏事件是提示技术的金矿②。
就在此时⑱,大神卡帕西发现了华点:LLM学习缺少主要范式⑦?
随即他提出系统提示学习新范式——模拟人类经验积累过程⑰,将系统提示嵌入权重②。
简单总结一下⑳,就是模拟人类学习⑧,为LLM提供备忘录功能⑭,让LLM拥有自主反思用户问题的“记忆”功能①,记录通用的问题解决知识和策略⑫。
新范式一石激起千层浪①,有人表示赞同③,也有人开始着手分析新范式帮助LLM畅玩Minecraft的可行性:
当然也有人持反对意见⑬,认为允许模型自己编写提示会使模型更加混乱⑳,也无法保证模型不会错误地理解提示❷。
具体是怎么一回事呢④?别急⑲,接下来让我们一起来回顾整个事件⑪。
Claude系统提示词曝光
据揭露④,完整的Claude系统提示词包含16739个字⑰,也就是110kb⑤。相比之下❷,ChatGPT中的OpenAI的o4-mini的系统提示仅有2218个字⑭,约为Claude的13%⑤。
具体内容也相当有趣⑬,不仅详细阐述了Claude基本的行为风格和偏好②,还包含了大量全局的问题解决策略⑥,例如下面这个解决经典LLM问题“草莓单词里有几个‘r’字母”:
系统提示告诉LLM如何回复用户提示②,类似于LLM的“设置”选项⑰,定义用哪种语气回应▓,以及补充训练数据中所没有的上下文信息▓。
以下是Claude的提示组件构成:
其中最大的组件是工具定义⑩,由MCP服务器进行信息填充▓。与标准的API不同④,MCP向LLM提供关于指令的详细说明教程❷。
此外⑲,其余提示近80%的内容都与工具有关❶,都详细说明了在与用户的交互场景中Claude是如何作用的⑥。
在提示词文档的最后还包含一些热修复②,指出了常见的LLM陷阱⑩,例如关于川普的总统就职信息:
根据该提示⑧,Claude的可靠知识截止于2024年10月⑭,此后发生的事件或新闻都以人为热修复或使用网络搜索工具来补充②。
利用系统提示学习构建新范式
在读完Claude系统提示词文档后③,Karpathy火速发表了一篇小作文——LLM学习缺乏主要范式③,并称之为系统提示学习❸。
传统学习范式基于强化学习⑲、监督学习等预设框架被动优化④,问题的解决只依赖于强化学习嵌入权重⑯,实际并不理解用户输入⑥。
新范式与强化学习类似①,但采用直接编辑提示而非梯度下降的学习算法⑰。
其强调构建系统提示符供自身使用⑥,让预处理获取知识⑩、微调塑造行为习惯①、系统提示学习制定策略⑬,使LLM可以根据实时反馈和情景需求调整和完善响应策略①。
举个栗子⑭,现在的LLM就像电影《记忆碎片》的主人公▓,只有短期的碎片记忆⑦,无法形成新的长期记忆⑬。
而新范式仿照正常人类学习过程⑲,即当你遇到一些问题并尝试解决后⑧,你也许会用专属于你的“系统提示”记住解决策略⑳,在下一次遇到同类问题时⑥,你就会自然而然想到:也许你可以泛化使用上次那种解决方案①。
通过经验-明确的策略-习惯性权重的流程④,LLM可以像人类一样记笔记⑳,将知识转化为直觉⑬,达成实践学习❶、逻辑推理的范式转变①。
利用系统提示学习可以有效实现测试时间训练⑭,同时始终可以被人类审查⑮,并且保证更少的安全隐患⑥。
系统提示学习在未来还标志着自主AI系统正在发展自身的计算意识⑱,将超越传统学习范式的边界⑱,为真正的自我迭代乃至于AGI提供了可能❷。
当然④,Karpathy也明确指出新范式的实现还有更多有待解决的细节❷,例如编辑系统的运行问题⑰、知识如何从显性系统文本转变为习惯性权重等⑭。
对此②,广大网友展开了激烈的讨论①。
例如有网友提出可以补充一个记忆层以实现系统提示学习⑪。
也有网友直接抛出了自己在记忆文档方面的研究结果:
也有人质疑LLM缺乏持续学习的本质⑪,让它无法从自身思维中学习⑱,系统提示学习并不能从根本上解决⑬,还需要寻找更为有效的思维模式⑬。
那么你的看法是什么呢⑫?欢迎在评论区留言讨论~
系统提示词链接:https://raw.githubusercontent.com/asgeirtj/system_prompts_leaks/refs/heads/main/claude.txt
参考链接:
转载:感谢您对电玩城捕鱼种类都有的软件网站平台的认可⑲,以及对电玩城捕鱼种类都有的软件原创作品以及文章的青睐⑥,非常欢迎各位朋友分享到个人站长或者朋友圈⑪,但转载请说明文章出处“来源电玩城捕鱼种类都有的软件”⑭。
很赞哦⑲!
相关文章
随机图文
【地评线】中安时评:以总体国家安全观筑牢新时代安全防线
2023年9月⑪,《中华人民共和国无障碍环境建设法》正式实施⑱,作为我国无障碍环境建设的专门性法律⑪,这部法律为保障残疾人和老年人平等⑪、充分⑦、便捷地参与和融入社会生活⑪,促进社会全体人员共享经济社会发展成果①,从“毛孩子运动会”到“长耳朵的车队”滴滴开放日聚焦宠物出行
还记得当年这张出圈神图吗⑯,上衣就来自1995年的香奈儿❶。▼中国汽车欧洲突围2025年4月比亚迪欧洲多国销量超越特斯拉解读
这些虚拟场景的搭建④,不仅能降低培训成本❸,还能通过交互反馈提升学习效果⑥。沃尔沃全新SMA超级混动架构发布⑳,沃尔沃XC70外观揭晓
美国职业篮球联赛 步行者VS骑士理想汽车第19周销量0.82万辆
中美发布联合声明后②,特朗普转移炮火:欧盟对我们非常不公平!记者:皇马有意本菲卡左后卫A费⑨,球员曾效力皇马青训梯队
此前③,在教皇任期即将结束时▓,方济各就格外关注AI对人类构成的威胁③,并且呼吁制定一项国际条约⑰,用以规范AI⑱。比亚迪申请油路系统专利⑲,降低动力总成内部件搅油造成的拖曳损失
如果你有这些预算⑱,你会买这款车吗⑮?年销不到200万辆蔚小理三年内消失⑲?
乌兰察布市紫花苜蓿核心种质资源圃建设情况①。 在鄂尔多斯市 沙漠边缘“锁边护草” 牧民变生态管护员 工资草场双收入 在巴彦淖尔市 麦收后种饲草 土地种植一茬变两茬 耕地“加班”不荒废