您现在的位置是:网站首页>房产房产
手机电玩城2016版
覃映秋 2025-05-14 【房产】 0584 人已围观
鹭羽 发自 凹非寺量子位 | 公众号 QbitAI
全网刷屏的Claude系统提示词⑤,结果被卡帕西大神当场抓虫❶?⑱!
事情是这样的⑰。
一夜之间▓,近1.7万字系统提示词——包含24000个token⑧,详细定义了模型行为⑧、工具使用和引用格式…..全部细节直接在GitHub上被泄露了⑦!
这事儿一出⑫,网友蜂拥而至速速围观⑯,甚至亲切地称呼这次意外泄漏事件是提示技术的金矿⑲。
就在此时⑩,大神卡帕西发现了华点:LLM学习缺少主要范式⑳?
随即他提出系统提示学习新范式——模拟人类经验积累过程⑭,将系统提示嵌入权重⑱。
简单总结一下⑥,就是模拟人类学习⑭,为LLM提供备忘录功能①,让LLM拥有自主反思用户问题的“记忆”功能❶,记录通用的问题解决知识和策略❶。
新范式一石激起千层浪⑦,有人表示赞同①,也有人开始着手分析新范式帮助LLM畅玩Minecraft的可行性:
当然也有人持反对意见⑭,认为允许模型自己编写提示会使模型更加混乱❸,也无法保证模型不会错误地理解提示⑭。
具体是怎么一回事呢⑭?别急⑮,接下来让我们一起来回顾整个事件①。
Claude系统提示词曝光
据揭露⑱,完整的Claude系统提示词包含16739个字❶,也就是110kb⑱。相比之下②,ChatGPT中的OpenAI的o4-mini的系统提示仅有2218个字⑧,约为Claude的13%⑯。
具体内容也相当有趣❶,不仅详细阐述了Claude基本的行为风格和偏好⑨,还包含了大量全局的问题解决策略⑲,例如下面这个解决经典LLM问题“草莓单词里有几个‘r’字母”:
系统提示告诉LLM如何回复用户提示⑯,类似于LLM的“设置”选项⑤,定义用哪种语气回应⑪,以及补充训练数据中所没有的上下文信息⑧。
以下是Claude的提示组件构成:
其中最大的组件是工具定义⑦,由MCP服务器进行信息填充⑩。与标准的API不同⑫,MCP向LLM提供关于指令的详细说明教程③。
此外⑯,其余提示近80%的内容都与工具有关①,都详细说明了在与用户的交互场景中Claude是如何作用的⑧。
在提示词文档的最后还包含一些热修复⑱,指出了常见的LLM陷阱⑭,例如关于川普的总统就职信息:
根据该提示⑳,Claude的可靠知识截止于2024年10月⑨,此后发生的事件或新闻都以人为热修复或使用网络搜索工具来补充⑲。
利用系统提示学习构建新范式
在读完Claude系统提示词文档后⑫,Karpathy火速发表了一篇小作文——LLM学习缺乏主要范式❷,并称之为系统提示学习▓。
传统学习范式基于强化学习①、监督学习等预设框架被动优化④,问题的解决只依赖于强化学习嵌入权重⑫,实际并不理解用户输入⑮。
新范式与强化学习类似④,但采用直接编辑提示而非梯度下降的学习算法❶。
其强调构建系统提示符供自身使用⑨,让预处理获取知识⑥、微调塑造行为习惯⑫、系统提示学习制定策略⑧,使LLM可以根据实时反馈和情景需求调整和完善响应策略▓。
举个栗子⑧,现在的LLM就像电影《记忆碎片》的主人公⑤,只有短期的碎片记忆⑪,无法形成新的长期记忆⑩。
而新范式仿照正常人类学习过程⑱,即当你遇到一些问题并尝试解决后①,你也许会用专属于你的“系统提示”记住解决策略⑯,在下一次遇到同类问题时⑥,你就会自然而然想到:也许你可以泛化使用上次那种解决方案⑥。
通过经验-明确的策略-习惯性权重的流程▓,LLM可以像人类一样记笔记⑩,将知识转化为直觉⑮,达成实践学习⑦、逻辑推理的范式转变▓。
利用系统提示学习可以有效实现测试时间训练▓,同时始终可以被人类审查⑰,并且保证更少的安全隐患⑪。
系统提示学习在未来还标志着自主AI系统正在发展自身的计算意识②,将超越传统学习范式的边界⑥,为真正的自我迭代乃至于AGI提供了可能⑰。
当然⑰,Karpathy也明确指出新范式的实现还有更多有待解决的细节⑥,例如编辑系统的运行问题③、知识如何从显性系统文本转变为习惯性权重等⑩。
对此⑭,广大网友展开了激烈的讨论⑯。
例如有网友提出可以补充一个记忆层以实现系统提示学习⑦。
也有网友直接抛出了自己在记忆文档方面的研究结果:
也有人质疑LLM缺乏持续学习的本质❶,让它无法从自身思维中学习⑩,系统提示学习并不能从根本上解决⑥,还需要寻找更为有效的思维模式④。
那么你的看法是什么呢⑫?欢迎在评论区留言讨论~
系统提示词链接:https://raw.githubusercontent.com/asgeirtj/system_prompts_leaks/refs/heads/main/claude.txt
参考链接:
转载:感谢您对电玩城捕鱼种类都有的软件网站平台的认可⑱,以及对电玩城捕鱼种类都有的软件原创作品以及文章的青睐❶,非常欢迎各位朋友分享到个人站长或者朋友圈②,但转载请说明文章出处“来源电玩城捕鱼种类都有的软件”⑱。
很赞哦⑳!
相关文章
随机图文
意甲第36轮亚特兰大2 1罗马提前锁定欧冠资格
小灰山椒鸟⑪,隶属于雀形目山椒鸟科山椒鸟属鸟类⑧。雄鸟头顶中部到枕部及耳羽后方呈炭灰色⑤,头部其余部分白色⑱;背部至翅膀上覆羽灰色①;飞羽黑色❷;尾羽深褐色⑯,最外五根尾羽尖端至内侧逐渐增多为白色⑧;下体白色⑮,胸部和天空:皇马尚未向利物浦发出提前签约阿诺德的报价
潜水时注意平衡各种气腔内的压力❶,尽量避免屏气⑱,上浮时正常呼吸④,速度不超过每秒0.15米⑨,以确保逐渐排出废气⑬。感觉不适时❷,请及时示意潜水教练或同伴❷,立即终止活动②。-
低利率下的银行理财“双降”:150只产品下调业绩比较基准 机构降费留客
注:米哈伊柳克⑲、朱赞和斯普林格的合同下赛季为非保障合同①。 库明加连续两场季后赛替补得到20+ 勇士自乔丹
加载中⑥、阅读排行榜❶、评论排行榜⑦、牛弹琴:这张图诛心②,让印度破防了-
😦内马尔妹妹与男友复合4个月就分手⑤,这是他们10年来第7次分手 内马尔·达·席尔瓦
直播吧5月13名记罗马诺报道⑮,拜仁正在推动完成若纳坦-塔的签约❷。 AE200“飞行汽车”发布 票价与豪华网约车相当 成都迎来“飞的”时代|封面头条
特朗普家族的“加密货币生意”虽然能带来剧烈的市场波动⑱,但恐怕很难给广大看热闹的散户带来什么收益⑬。九人伤停+一人禁赛⑥!本赛季皇马一线队官宣伤病已达36人次
特别声明:以上文章内容仅代表作者本人观点②,不代表新浪网观点或立场⑦。如有关于作品内容⑩、版权或其它问题请于作品发表后的30日内与新浪网联系⑨。竞争开始⑮!罗马诺:蓝军⑮、利物浦❸、枪手计划本月触发怀森解约条款
这件事中老人自己的理念⑮、行为的确种下“恶果”❸,但不论从法律还是伦理角度⑧,老人的两个女儿都不应该不负责任④、消极处理⑨。