Artista treina um chatbot de IA com seu diário e fala com sua criança interior

Uma artista descreve a experiência que teve depois de treinar o GPT-3 com entradas de diário de décadas como um processo de cura.

Fora da caixa, grandes modelos de linguagem como GPT-3 gerar texto atraente. Um recente atualização para GPT-3 com feedback humano alinha a qualidade do texto ainda mais perto das necessidades humanas. Esses modelos atingem todo o seu potencial quando são ajustados com dados dedicados para um caso de uso específico.

A artista e programadora criativa Michelle Huang está usando esta oportunidade para desenvolver um chatbot que permite que ela converse com sua “criança interior”. Huang alimentou a IA com anotações do diário de sua infância.

Como ela compartilha em um tópico no Twitter, ela manteve um diário de seus sonhos, medos e segredos quase todos os dias por mais de dez anos. O conteúdo variava de reclamações sobre seu dever de casa até sua paixão. Às vezes trivial, às vezes revelador.

“Dessa forma, eu poderia simular com precisão como seria falar com meu eu de infância, com base em fontes de dados reais durante esse período”, disse Huang. A artista acredita que tem acesso direto ao seu antigo eu por meio do chatbot, em vez de arriscar que seu eu atual distorça sua autoimagem por meio de falsas memórias.

“Jovem Michelle” pergunta sobre os sonhos da atual Michelle

Primeiro, Huang fez a si mesma perguntas gerais sobre o mundo. O modelo ajustado responde a essas perguntas de maneira bastante geral, mas plausível.

Michele de hoje: O que você acha do mundo?
Michelle jovem: Acho o mundo fantástico e há tanto para aprender e descobrir. Também acho importante fazer a diferença no mundo e ser gentil e compreensivo com os outros.
Michele de hoje: O que é mais importante: liberdade ou amor?
Michelle jovem: Acho que ambos são importantes, mas se eu tivesse que escolher um, diria que o amor é mais importante. O amor é algo que pode nos ajudar em qualquer situação, enquanto a liberdade pode ser solitária às vezes.

Huang então deu a seu reflexo digital a oportunidade de fazer suas perguntas. A modelo quis saber especialmente se Huang havia seguido seus sonhos e a elogiou efusivamente.

“Essa interação específica parecia muito semelhante a uma conversa normal de mensagens de texto – como se eu estivesse enviando mensagens de texto para mim mesmo no passado em tempo real”, escreve Huang.

Huang disse que ficou surpresa com a precisão com que o modelo pode prever seus interesses atuais, embora depois de muitas tentativas e erros, e apenas a partir de entradas antigas no diário. Isso a levou a se perguntar se seu caminho já havia sido traçado em sua psique.

Como treinar a IA do seu filho

Após a resposta esmagadora, Huang compartilhou sua abordagem para o ajuste fino do GPT-3 em um segundo fio . Isso requer acesso pago ao GPT-3 – ela não compartilha quantos tokens pagos usou em seu experimento.

Huang treinou seu chatbot com o seguinte prompt. Além disso, é possível influenciar o tom do chatbot com descrições como “o jovem (nome) é amoroso, gentil e muito gentil”.

O que se segue é uma conversa com a atual Michelle (idade (redigido)) e a jovem Michelle (14 anos).

A jovem Michelle escreveu as seguintes entradas de diário:

(registros do diário aqui)

Presente Michelle: (digite sua pergunta aqui)