Adicionei uma linha às instruções de Claude e a melhoria foi imediata

Antes dos agentes, antes dos MCPs, antes de cada modelador começar a correr para superar o último, só havia uma palavra que poderia deter o Recorde Mundial do Guinness por mais tempo em um dicionário de IA: incitar. Todo o resto veio e desapareceu ou foi renomeado três vezes, mas o prompt permanece exatamente onde começou. Ainda é a única coisa entre você e uma boa resposta. É claro que os workshops instantâneos de engenharia e as masterclasses ChatGPT de US$ 200 desapareceram em grande parte, e metade das pessoas que se autodenominavam Engenheiros Instantâneos em 2023 mudaram discretamente seus títulos no LinkedIn desde então.

No entanto, o que eles estavam circulando não desapareceu, e a palavra permaneceu porque o trabalho que lhe deu o nome nunca foi automatizado. Não importa quão capaz o modelo se torne, ele ainda não consegue ler sua mente para saber o que você realmente deseja. Você poderia usar um plano premium com créditos de API como Sam Altman, executar o modelo mais capaz que a Anthropic já entregou e ainda obter uma resposta que você acha que veio de um modelo inicial de IA. Há algum tempo comecei a adicionar uma única linha ao final dos meus prompts e a melhoria foi imediata.

Claude continua respondendo perguntas que na verdade não estou perguntando

Problema de resposta adjacente, com certeza

Neste ponto, ninguém fica surpreso com as alucinações da IA, e todos sabem bem o suficiente para aceitar tudo o que uma IA diz com uma pitada de sal. Embora os laboratórios de IA tenham se esforçado ao máximo para garantir que seus modelos mais recentes tenham cada vez menos alucinações, existe um modo de falha que nenhuma busca de benchmark consegue evitar: acertar a pergunta errada. Agora, Claude não está inventando nada aqui e dá respostas totalmente precisas. As ferramentas de IA ficaram significativamente melhores nisso. No entanto, a resposta só é precisa para uma pergunta ligeiramente diferente daquela que eu queria fazer.

Como não há nada tecnicamente errado com isso, nunca dispara um alarme que possa ser causado por alucinações. Como resultado, o LLM responde a perguntas que você nunca fez e que você ainda encontrará com frequência, independentemente do modelo escolhido. Agora, a razão pela qual isso acontece tem a ver com o prompt que você está usando. Pense nisso: se você fizer uma pergunta a alguém sem fornecer o quadro completo, essa pessoa preencherá as lacunas com suas próprias suposições, seu próprio contexto, seu melhor palpite sobre o que você quis dizer. Pelo menos a pessoa tem a chance de parar e pedir que você explique. E embora eu ache que Claude e outras ferramentas de IA muitas vezes param para algum tipo de explicação, isso geralmente ocorre apenas quando o que você está perguntando é extremamente vago.

Por exemplo, se eu pedir ao Claude para criar uma página web para mim, ele quase sempre irá parar e perguntar que tipo de layout eu quero e quais são as minhas preferências estéticas. Peça algo que pareça específico o suficiente, como escrever-me um ensaio sobre a Revolução Francesa, e Claude não vai parar porque o pedido foi lido. Tudo começará com a tomada silenciosa de algumas decisões em seu nome. Ele escolherá a extensão, embora “ensaio” possa significar trezentas ou três mil palavras. Ele vai se adequar ao nível e ao tom da leitura – é para um estudante do ensino médio, um seminário universitário ou apenas para você tentando descobrir essas coisas enquanto toma um café? Claude às vezes simplesmente decide por si mesmo. O mesmo vale quando você entra facilmente em um tópico sem nunca explicar o que realmente deseja. Às vezes, ele não espera para descobrir e apenas escolhe uma pista e dirige.

Esta linha corrigiu a maior parte

Doze palavras fazem o que minhas exortações mais longas não conseguiram

A correção que achei mais útil não é um modelo de prompt inteligente ou alguma mensagem de sistema de 300 palavras que copiei do Reddit. Esta é a frase que colei no final de tudo que perguntei (e editei ligeiramente conforme necessário): Antes de responder, diga-me o que você precisa saber para responder bem e quaisquer suposições que você faria de outra forma.

Com esta linha no final de cada prompt, Claude descreve o que ele ainda não sabe. Voltando ao ensaio sobre a Revolução Francesa, Claude não produzirá uma única palavra do ensaio com a linha que o acompanha. Em vez disso, pergunta por quanto tempo eu quero, para quem é, se quero um argumento restrito ou uma visão geral ampla, quão formal precisa ser, se preciso de fontes, etc. Basicamente, esse prompt me dá uma lista exata das decisões que ele teria tomado silenciosamente e me permite tomá-las sozinho. As mesmas cinco suposições que costumavam acontecer silenciosamente agora acontecem em voz alta antes que qualquer coisa seja escrita.

Agora, Claude poderia ter parado e me feito algumas perguntas se eu não tivesse usado esse prompt. No entanto, dado que fui sincero sobre o que queria e deixei claro que queria que as suposições fossem resolvidas antes de qualquer coisa ser escrita, é preciso muito mais do que seria de outra forma. Deixado ao seu próprio julgamento, Claude descobre apenas uma ou duas coisas que considera evidentemente obscuras.

Claude Projects é o melhor impulsionador de produtividade que você não está usando

Ele verifica muitas caixas para mim.

Com a linha, ele traz à tona todo o conjunto, incluindo as decisões silenciosas que normalmente se sentiria confiante o suficiente para tomar por conta própria. São esses que tendem a enviar a resposta na direção errada. Sem o aviso, eu teria que tomar cada uma dessas decisões sozinho. Teria sido que o pedido original incluía todos os detalhes, o que significa que eu sei o que é importante antes de ver a resposta, ou depois que Claude silenciosamente seguiu o caminho errado e o perseguiu com acompanhamentos constantes. Ambos funcionam tecnicamente, mas me custou exatamente o que procurei por Claude para economizar: tempo.

Funciona com qualquer ferramenta de IA que você já usa

Claro, você pode usar esse prompt com qualquer LLM que estiver usando, seja um modelo baseado em nuvem ou um LLM local. Não é ciência de foguetes, e a linha existe apenas para fazer com que o modelo mostre o que está fazendo antes de se comprometer com uma resposta.

Esse hábito de preencher lacunas que você nunca apontou e parecer confiante ao fazê-lo não é uma peculiaridade de Claude; todo modelo faz. Portanto, quer você esteja usando ChatGPT, Gemini, o modelo local de lhama ou Claude, a mesma frase expõe as mesmas suposições silenciosas antes que eles tenham a chance de desviar a resposta errada.

Link da fonte