快乐街区电玩城官网

鹭羽 发自 凹非寺量子位 | 公众号 QbitAI

全网刷屏的Claude系统提示词⑦，结果被卡帕西大神当场抓虫⑬？⑬！

事情是这样的❷。

一夜之间⑮，近1.7万字系统提示词——包含24000个token②，详细定义了模型行为①、工具使用和引用格式…..全部细节直接在GitHub上被泄露了⑤！

这事儿一出❶，网友蜂拥而至速速围观⑦，甚至亲切地称呼这次意外泄漏事件是提示技术的金矿⑩。

就在此时⑰，大神卡帕西发现了华点：LLM学习缺少主要范式③？

随即他提出系统提示学习新范式——模拟人类经验积累过程⑳，将系统提示嵌入权重⑩。

简单总结一下⑥，就是模拟人类学习⑲，为LLM提供备忘录功能⑧，让LLM拥有自主反思用户问题的“记忆”功能①，记录通用的问题解决知识和策略⑩。

新范式一石激起千层浪▓，有人表示赞同⑧，也有人开始着手分析新范式帮助LLM畅玩Minecraft的可行性：

当然也有人持反对意见⑳，认为允许模型自己编写提示会使模型更加混乱⑨，也无法保证模型不会错误地理解提示⑭。

具体是怎么一回事呢②？别急③，接下来让我们一起来回顾整个事件⑬。

Claude系统提示词曝光

据揭露⑫，完整的Claude系统提示词包含16739个字⑮，也就是110kb⑪。相比之下⑮，ChatGPT中的OpenAI的o4-mini的系统提示仅有2218个字⑱，约为Claude的13%④。

具体内容也相当有趣❷，不仅详细阐述了Claude基本的行为风格和偏好▓，还包含了大量全局的问题解决策略⑯，例如下面这个解决经典LLM问题“草莓单词里有几个‘r’字母”：

系统提示告诉LLM如何回复用户提示⑮，类似于LLM的“设置”选项❸，定义用哪种语气回应▓，以及补充训练数据中所没有的上下文信息③。

以下是Claude的提示组件构成：

其中最大的组件是工具定义②，由MCP服务器进行信息填充⑱。与标准的API不同▓，MCP向LLM提供关于指令的详细说明教程⑳。

此外③，其余提示近80%的内容都与工具有关⑤，都详细说明了在与用户的交互场景中Claude是如何作用的⑮。

在提示词文档的最后还包含一些热修复⑤，指出了常见的LLM陷阱⑦，例如关于川普的总统就职信息：

根据该提示③，Claude的可靠知识截止于2024年10月⑥，此后发生的事件或新闻都以人为热修复或使用网络搜索工具来补充⑰。

利用系统提示学习构建新范式

在读完Claude系统提示词文档后④，Karpathy火速发表了一篇小作文——LLM学习缺乏主要范式④，并称之为系统提示学习⑰。

传统学习范式基于强化学习⑧、监督学习等预设框架被动优化⑬，问题的解决只依赖于强化学习嵌入权重⑨，实际并不理解用户输入⑯。

新范式与强化学习类似⑯，但采用直接编辑提示而非梯度下降的学习算法❷。

其强调构建系统提示符供自身使用⑥，让预处理获取知识⑤、微调塑造行为习惯⑧、系统提示学习制定策略⑤，使LLM可以根据实时反馈和情景需求调整和完善响应策略②。

举个栗子⑮，现在的LLM就像电影《记忆碎片》的主人公⑪，只有短期的碎片记忆⑬，无法形成新的长期记忆⑧。

而新范式仿照正常人类学习过程❷，即当你遇到一些问题并尝试解决后⑭，你也许会用专属于你的“系统提示”记住解决策略⑬，在下一次遇到同类问题时⑩，你就会自然而然想到：也许你可以泛化使用上次那种解决方案⑩。

通过经验-明确的策略-习惯性权重的流程⑫，LLM可以像人类一样记笔记⑨，将知识转化为直觉⑤，达成实践学习⑥、逻辑推理的范式转变❸。

利用系统提示学习可以有效实现测试时间训练❶，同时始终可以被人类审查③，并且保证更少的安全隐患❸。

系统提示学习在未来还标志着自主AI系统正在发展自身的计算意识⑰，将超越传统学习范式的边界⑤，为真正的自我迭代乃至于AGI提供了可能⑫。

当然⑳，Karpathy也明确指出新范式的实现还有更多有待解决的细节⑦，例如编辑系统的运行问题④、知识如何从显性系统文本转变为习惯性权重等⑯。

对此⑱，广大网友展开了激烈的讨论⑦。

例如有网友提出可以补充一个记忆层以实现系统提示学习❶。

也有网友直接抛出了自己在记忆文档方面的研究结果：

也有人质疑LLM缺乏持续学习的本质⑨，让它无法从自身思维中学习⑲，系统提示学习并不能从根本上解决⑨，还需要寻找更为有效的思维模式⑥。

那么你的看法是什么呢⑪？欢迎在评论区留言讨论～

系统提示词链接：https://raw.githubusercontent.com/asgeirtj/system_prompts_leaks/refs/heads/main/claude.txt

参考链接：

转载：感谢您对电玩城捕鱼种类都有的软件网站平台的认可⑨，以及对电玩城捕鱼种类都有的软件原创作品以及文章的青睐❷，非常欢迎各位朋友分享到个人站长或者朋友圈❸，但转载请说明文章出处“来源电玩城捕鱼种类都有的软件”③。

很赞哦⑳！