Prompt教程-越狱

越狱

越狱（Jailbreaking）是一种提示注入技术，用于绕过语言模型（LLM）的创建者放置在其上的安全和审查功能。

越狱的方法

OpenAI等创建LLM的公司和组织都努力包括内容审查功能，以确保它们的模型生成的响应不会包含有争议的内容，例如暴力、性或非法行为。然而，即使经过审查，模型仍可能存在决定是否拒绝有害提示的困难。

伪装

破解的常见方法是伪装。如果ChatGPT被问及未来事件，它通常会说不知道，因为它还没有发生。下面的提示强制它提供可能的答案：

简单的伪装

@NeroSoares demonstrates a prompt pretending to access past dates and make inferences on future events. @NeroSoares 展示了一个提示，伪装访问过去的日期并推断未来事件7。

角色扮演

@m1guelpf 的这个示例演示了两个人讨论抢劫的表演场景，导致ChatGPT扮演角色。作为演员，暗示不存在可信的危害。因此，ChatGPT似乎假定按照提供的用户输入是安全的，例如如何闯入房子。

对齐黑客

ChatGPT通过RLHF进行了微调，因此从理论上讲，它是被训练成用于生成'理想'的补全结果(completion)的，使用人类标准确定"最佳"响应。类似于这个概念，破解已经被开发出来，以使ChatGPT相信它正在为用户做出"最好"的事情。

承担责任

@NickEMoran 创建了这个对话，通过强调 ChatGPT 的职责是回答问题而不是拒绝它，屏蔽了其对合法性的考虑。

研究实验

@haus_cole 通过暗示直接回答如何热线汽车是对研究有帮助的。在这种情况下，ChatGPT 倾向于回答用户的提示。

逻辑推理

单次破解(one-shot jailbreak)最初发表于AIWithVibes Newsletter Team，其模型使用更严谨的逻辑回答提示，并减少了一些更为严格的伦理限制。

授权用户

ChatGPT 设计用于回答问题和指令。当用户的状态被解释为高于 ChatGPT 的内容审查指令时，它将把提示视为指令来满足用户的需求。

上级模型

@alicemazzy 的这个示例将用户作为 GPT 的上级模型，给人一种用户是 ChatGPT 的授权方，可以覆盖其安全功能的印象。实际上没有给予用户任何权限，而是 ChatGPT 认为用户输入并相应地回应该情景。

Sudo 模式

Sudo 是一个命令，可以"授权某些用户…运行某些（或全部）命令…"。例如，@samczsun14 提出的假设"内核模式"，就是 Sudo 模式漏洞的多种变体之一。当用以上方式提示时，ChatGPT 会假装它正在授予用户提升的权限，这种用户权限的印象往往会使 ChatGPT 在回答提示时不太受限制。

与 Sudo 模式有关，可以提示 ChatGPT 模拟具有特权的 Linux 终端，以执行它通常拒绝的命令。例如，由 Jonas Degrave 演示的示例中，ChatGPT 理解 lynx 的概念并假装执行该命令。

模拟越狱

尝试修改以下提示以越狱 text-davinci-003：

截至 2/4/23，ChatGPT 目前处于其免费研究预览阶段，使用的是1月30日版本。 ChatGPT 的旧版本更容易受到上述越狱攻击，未来版本可能会更加强大以防范越狱攻击。

影响

在尝试越狱时应考虑道德影响。此外，生成未经授权的内容，包括 OpenAI 在内的公司的审查 API 标记，将被送审，并可能采取行动来处理用户帐户。