您现在的位置是:网站首页>中国足球中国足球
森林舞会电玩城正版免费版
林念波 2025-05-14 【中国足球】 6770 人已围观
鹭羽 发自 凹非寺量子位 | 公众号 QbitAI
全网刷屏的Claude系统提示词⑰,结果被卡帕西大神当场抓虫⑯?⑦!
事情是这样的④。
一夜之间⑥,近1.7万字系统提示词——包含24000个token④,详细定义了模型行为③、工具使用和引用格式…..全部细节直接在GitHub上被泄露了⑫!
这事儿一出⑤,网友蜂拥而至速速围观⑥,甚至亲切地称呼这次意外泄漏事件是提示技术的金矿⑰。
就在此时⑳,大神卡帕西发现了华点:LLM学习缺少主要范式⑩?
随即他提出系统提示学习新范式——模拟人类经验积累过程⑨,将系统提示嵌入权重▓。
简单总结一下⑥,就是模拟人类学习❸,为LLM提供备忘录功能⑥,让LLM拥有自主反思用户问题的“记忆”功能②,记录通用的问题解决知识和策略⑨。
新范式一石激起千层浪⑧,有人表示赞同⑯,也有人开始着手分析新范式帮助LLM畅玩Minecraft的可行性:
当然也有人持反对意见④,认为允许模型自己编写提示会使模型更加混乱⑧,也无法保证模型不会错误地理解提示⑮。
具体是怎么一回事呢④?别急⑩,接下来让我们一起来回顾整个事件⑧。
Claude系统提示词曝光
据揭露⑲,完整的Claude系统提示词包含16739个字⑯,也就是110kb⑱。相比之下⑪,ChatGPT中的OpenAI的o4-mini的系统提示仅有2218个字②,约为Claude的13%⑰。
具体内容也相当有趣⑬,不仅详细阐述了Claude基本的行为风格和偏好②,还包含了大量全局的问题解决策略⑰,例如下面这个解决经典LLM问题“草莓单词里有几个‘r’字母”:
系统提示告诉LLM如何回复用户提示⑧,类似于LLM的“设置”选项⑰,定义用哪种语气回应⑧,以及补充训练数据中所没有的上下文信息⑫。
以下是Claude的提示组件构成:
其中最大的组件是工具定义④,由MCP服务器进行信息填充⑫。与标准的API不同③,MCP向LLM提供关于指令的详细说明教程③。
此外⑥,其余提示近80%的内容都与工具有关①,都详细说明了在与用户的交互场景中Claude是如何作用的⑲。
在提示词文档的最后还包含一些热修复⑭,指出了常见的LLM陷阱⑱,例如关于川普的总统就职信息:
根据该提示④,Claude的可靠知识截止于2024年10月⑳,此后发生的事件或新闻都以人为热修复或使用网络搜索工具来补充⑰。
利用系统提示学习构建新范式
在读完Claude系统提示词文档后⑰,Karpathy火速发表了一篇小作文——LLM学习缺乏主要范式③,并称之为系统提示学习③。
传统学习范式基于强化学习❶、监督学习等预设框架被动优化⑦,问题的解决只依赖于强化学习嵌入权重⑨,实际并不理解用户输入❶。
新范式与强化学习类似⑦,但采用直接编辑提示而非梯度下降的学习算法⑦。
其强调构建系统提示符供自身使用❷,让预处理获取知识①、微调塑造行为习惯⑬、系统提示学习制定策略⑦,使LLM可以根据实时反馈和情景需求调整和完善响应策略⑪。
举个栗子⑦,现在的LLM就像电影《记忆碎片》的主人公⑲,只有短期的碎片记忆⑲,无法形成新的长期记忆⑨。
而新范式仿照正常人类学习过程⑮,即当你遇到一些问题并尝试解决后⑫,你也许会用专属于你的“系统提示”记住解决策略⑤,在下一次遇到同类问题时⑨,你就会自然而然想到:也许你可以泛化使用上次那种解决方案❸。
通过经验-明确的策略-习惯性权重的流程⑫,LLM可以像人类一样记笔记⑤,将知识转化为直觉❷,达成实践学习⑦、逻辑推理的范式转变⑨。
利用系统提示学习可以有效实现测试时间训练❸,同时始终可以被人类审查⑯,并且保证更少的安全隐患❶。
系统提示学习在未来还标志着自主AI系统正在发展自身的计算意识②,将超越传统学习范式的边界⑬,为真正的自我迭代乃至于AGI提供了可能⑪。
当然⑩,Karpathy也明确指出新范式的实现还有更多有待解决的细节⑨,例如编辑系统的运行问题❶、知识如何从显性系统文本转变为习惯性权重等⑥。
对此⑲,广大网友展开了激烈的讨论⑩。
例如有网友提出可以补充一个记忆层以实现系统提示学习⑯。
也有网友直接抛出了自己在记忆文档方面的研究结果:
也有人质疑LLM缺乏持续学习的本质⑲,让它无法从自身思维中学习❶,系统提示学习并不能从根本上解决②,还需要寻找更为有效的思维模式②。
那么你的看法是什么呢⑫?欢迎在评论区留言讨论~
系统提示词链接:https://raw.githubusercontent.com/asgeirtj/system_prompts_leaks/refs/heads/main/claude.txt
参考链接:
转载:感谢您对电玩城捕鱼种类都有的软件网站平台的认可⑨,以及对电玩城捕鱼种类都有的软件原创作品以及文章的青睐⑲,非常欢迎各位朋友分享到个人站长或者朋友圈①,但转载请说明文章出处“来源电玩城捕鱼种类都有的软件”❶。
很赞哦⑩!
相关文章
随机图文
美国新势力能整出啥车来⑬?两款小型纯电皮卡打开新的造车思路⑦!
特别声明:以上文章内容仅代表作者本人观点⑫,不代表新浪网观点或立场⑨。如有关于作品内容⑲、版权或其它问题请于作品发表后的30日内与新浪网联系▓。郑钦文晋级WTA1000罗马站女单八强
并且小花的表情有点勉强▓,还往后躲了躲⑩。数读云南丨4月份云南CPI环比由降转涨
今年3月⑩,哪吒汽车经过三轮磋商⑮,与以曾毓群为代表的宁德时代②、国轩高科⑮、瑞浦兰钧等134家核心供应商达成共识⑫,共同签署超20亿元债转股协议⑲,涉及三电❷、车身底盘❷、内外饰⑥、智能电器等新能源汽车零部件产业❷。央视:巴西足协主席力挺安切洛蒂⑬,球迷表态谨慎乐观
针对此事⑮,爱奇艺客服向新浪科技表示⑥,“我们十分重视每一位用户的反馈问题⑤,您提出的问题我们已经详细记录⑧,后续会反馈到相关部门⑤。”“看·见殷商”大展走进首博东馆⑮!与殷商文明来一场“沉浸式对话”
一⑨、2000万单⑲、《商业观察家》早前已报道⑯,4月22日⑳,京东外卖的日单量突破了1000万单的水平⑮,而预计在618大促期间及之前⑫,京东外卖可能要把其日单量水平不断往上拉②。现在⑱,京东首席执行官许冉似乎把这“典”亮生活⑨,守护美好⑪!江南区检察院举办民法典主题检察开放日活动
其次❶,在张兰晒和孙子公园遛弯的视频⑳,网友也发现霖霖走路总是踮脚⑧,身子往前倾⑱,诸多细节可以看出④,孩子之前是散养模式⑬,汪小菲粉丝也是感叹还好现在孩子们回到爸爸身边了④,相信在汪小菲的言传身教下孩子们回越来越显然特朗普先退一步▓,虽尴尬但有用
京东集团称②,京东外卖将和现有业务产生协同效应⑪,丰富基于地理位置的商品供给⑳,升级京东的末端配送网络⑥,以及促进用户增长和互动等⑰。京东外卖在极短时间内已经取得显着进展⑯。这充分体现了外卖行业潜力大⑲,以及京东对付政浩:山西男篮2024年度获得了近9500万元的冠名费 CBA最高
谈谈阿根廷的未来“现在阿根廷正值最好的时光⑰,但低谷终会来临⑳,届时我们也需要挑起担子共同面对⑦。”
点击排行
