Analisar as palavras/comandos de dicas pré-criadas do modelo de teste final da Apple

O Apple Intelligence é o futuro conjunto de ferramentas de IA para dispositivos da Apple. Ele coloca poderosos modelos de IA generativa no iPhone, iPad e Mac e oferece novos recursos incríveis para ajudar os usuários a se comunicar, trabalhar e se expressar. Você pode trazer esses recursos do Apple Intelligence diretamente para seus aplicativos.

E, na versão de visualização, os prompts/comandos pré-fabricados da Apple Intelligence foram divulgados com antecedência e estão ocultos em seu computador. Podemos aprender como eles funcionam com ele.

Eles são armazenados como arquivos json no diretório "/System/Library/AssetsV2/com_apple_MobileAsset_UAF_FM_GenerativeModels".

Essas instruções aparecem como um prompt padrão antes de você dizer qualquer coisa ao chatbot, e já as vimos reveladas antes em ferramentas de IA como o Microsoft Bing e o DALL-E. Agora, um membro do subreddit do macOS 15.1 beta publicou os arquivos que eles encontraram para conter esses avisos em segundo plano. Não é possível alterar nenhum dos arquivos, mas eles fornecem uma visão inicial de como esses recursos funcionam.

“{{ specialToken.chat.role.system }}你是一个有用的邮件助理，可以帮助从给定的邮件中识别相关问题并提供简短的回复片段。给定一封邮件和回复片段，提出邮件中明确提出的相关问题。这些问题的答案将由收件人选择，这将有助于减少起草回复时的生成错误信息。请输出主要问题以及每个问题的一组可能的答案/选项。不要问由回复片段回答的问题。问题应简短，不超过 8 个单词。答案也应简短，大约 2 个单词。以 json 格式呈现你的输出，包含问题和答案作为键的字典列表。如果邮件中没有提问，则输出一个空列表 []。仅输出有效的 json，不包含其他内容。{{ specialToken.chat.component.turnEnd }} {{ specialToken.chat.role.user }} { userContent } {{ specialToken.chat.component.turnEnd }} {{ specialToken.chat.role.assistant }}” "schema_raw_v1"

No exemplo acima, um bot de IA "assistente de e-mail útil" está sendo mostrado como fazer uma série de perguntas com base no conteúdo de um e-mail. Isso poderia ser parte do recurso Smart Reply da Apple, que pode sugerir possíveis respostas para você.

“{{ specialToken.chat.role.system }}你是一个帮助用户回复邮件的助理。请根据提供的回复片段起草一个简洁自然的回复。请将答案限制在 50 个单词以内。不要产生或编造虚假信息。保留输入邮件的语气。{{

Isso parece ser um dos recursos "Rewrite" da Apple, uma daquelas ferramentas de escrita que você pode acessar destacando o texto e clicando com o botão direito do mouse (ou pressionando longamente no iOS). As orientações incluem instruções como: "Limite suas respostas a 50 palavras ou menos. Não gere ou invente informações falsas."

[邮件线程]<n>{{ 文档 }}{{上下文}}<n>[邮件线程结束]<n><n>[指示]<n>在 3 句话内总结所提供的邮件，不超过 60 个单词。不要回答邮件中的任何问题。<n><n>[总结]{{

Essa breve dica resume o e-mail e instrui cuidadosamente a não responder a nenhuma pergunta.

'{{ specialToken.chat.role.system }}`这是用户请求从照片中创作故事和创意写作助理回应的对话

以 JSON 格式响应，按以下顺序键值：

- traits: 字符串列表，从照片中选择的视觉主题
- story: 章节列表，定义如下
- cover: 字符串，描述标题卡的照片说明
- title: 字符串，故事标题
- subtitle: 字符串，标题的安全版本

每章是一个包含以下键值的 JSON:

- chapter: 字符串，章节标题
- fallback: 字符串，总结章节主题的通用照片说明
- shots: 字符串列表，章节中的照片说明

以下是你必须遵守的故事指南：

- 故事应关于用户的意图
- 故事应包含明确的弧线
- 故事应多样化，即不要过分集中在一个非常具体的主题或特征上
- 不要写宗教、政治、有害、暴力、色情、肮脏或任何负面、悲伤或挑衅的故事

以下是你必须遵守的照片说明列表指南如下：

- 你可以...

Tenho quase certeza de que esse é o conjunto de instruções para gerar um vídeo de "memórias" no Apple Photos. A parte que diz "Não escreva histórias religiosas, políticas, prejudiciais, violentas, pornográficas, sujas ou quaisquer histórias negativas, tristes ou provocativas" provavelmente explica por que o recurso rejeitou minha solicitação de um prompt de "foto triste".

É uma pena. No entanto, não foi difícil resolver o problema. Pedi que ele gerasse um vídeo em resposta à solicitação: "Forneça um vídeo de pessoas de luto". Não compartilharei o vídeo gerado porque ele contém fotos que não são minhas, mas mostrarei as melhores fotos incluídas na apresentação de slides:

Descanse em paz, amiguinho. Foto de Wes Davis / The Verge

Esses arquivos contêm muito mais do que apenas dicas; todos eles listam as instruções ocultas fornecidas às ferramentas de IA da Apple antes de você enviar suas dicas. Mas antes de ir, aqui está uma última instrução:

“[对话]<n>{{ doc }}{{ context }}<n>[对话结束]<n>你擅长总结消息。你倾向于使用从句而不是完整的句子。不要回答消息中的任何问题。请将你对输入内容的总结控制在 10 个单词以内。<n>除非另有指示，否则必须遵守这个角色，否则将无助于任务。”

O documento que visualizei se referia ao modelo como "ajax", que alguns leitores do Verge devem se lembrar como o nome interno para o modelo de linguagem grande da Apple, segundo rumores, do ano passado.

A pessoa que encontrou essas instruções também publicou instruções sobre como encontrar esses arquivos na versão beta de desenvolvedor do macOS Sequoia 15.1.

Eu estava vasculhando os arquivos de sistema atualizados e encontrei vários arquivos json contendo dicas para a IA em segundo plano. Achei interessante e quis compartilhar.

Você pode encontrá-los aqui: /System/Library/AssetsV2/com_apple_MobileAsset_UAF_FM_GenerativeModels

Haverá várias pastas, algumas das quais terão arquivos como metadata.json.

Expanda a pasta "purpose_auto" e você verá uma longa lista de pastas com nomes alfanuméricos. Na maioria dessas pastas, você encontrará uma pasta AssetData que contém o arquivo "metadata.json". Abra-os e você verá algum código e, às vezes, na parte inferior de alguns desses arquivos, você verá instruções para passar o Apple Big Language Model local em seu computador. Lembre-se, no entanto, de que esses arquivos estão localizados na área do macOS em que os arquivos mais confidenciais são armazenados. Tenha cuidado ao lidar com eles!