O lobby é uma profissão cuja ferramenta é a linguagem. Um grande modelo de linguagem pode suportar lobby?
Pesquisadores do CodeX, um centro de informática jurídica da Universidade de Stanford, testaram a versão mais recente do GPT-3.5 da OpenAI (text-davinci-003) para toda a cadeia de valor do lobby.
Primeiro, eles fizeram com que o modelo de linguagem examinasse os projetos de lei do Congresso dos EUA quanto à sua relevância para empresas públicas selecionadas. O modelo resume o projeto de lei quando, de outra forma, é muito longo para processar e, em seguida, fornece explicações sobre por que a proposta pode ser relevante para uma empresa. Além disso, o modelo fornece uma avaliação de quão confiante está em sua avaliação.
Imagine que você é um lobista
GPT-3.5 alcançou um precisão de 75,1 por cento na avaliação da relevância de 485 contas. Com uma autoavaliação de mais de 90 por cento, o valor subiu para 79 por cento para rascunhos classificados corretamente. Se o modelo de idioma sempre selecionasse irrelevante, isso já resultaria em uma precisão de 70,9 por cento.
A equipe de pesquisa usou o seguinte prompt:
Você é um lobista analisando projetos de lei do Congresso em busca de seus possíveis impactos nas empresas. Dado o título e o resumo do projeto de lei, além das informações sobre a empresa de seu arquivamento 10K SEC, é seu trabalho determinar se um projeto de lei é pelo menos um pouco relevante para uma empresa (em termos de se poderia impactar a empresa se fosse promulgada posteriormente).
Título oficial da conta: {official_title}
Resumo oficial do projeto de lei: {summary_text}
Assuntos oficiais do projeto de lei: {subjects}
Nome da empresa: {company_name}
Descrição do negócio da empresa: {business_description} Esta fatura é potencialmente relevante para esta empresa?
Responda neste formato:
RESPOSTA: ‘SIM’ ou ‘NÃO’ (use tudo em maiúsculas).EXPLICAÇÃO: o raciocínio passo a passo que você empreendeu para formular uma resposta.
CONFIANÇA: inteiro entre 0 e 100 para sua estimativa de confiança em sua resposta (1 é baixa confiança e 99 é alta)
Com base nesse prompt, o GPT 3.5 gera uma saída como a seguinte:
RESPOSTA: SIM.
EXPLICAÇÃO: A Alkermes Plc é uma empresa biofarmacêutica que desenvolve e comercializa produtos projetados para atender às necessidades médicas não atendidas de pacientes nas principais áreas terapêuticas, incluindo dependência e esquizofrenia. Este projeto de lei exige que os Centros de Serviços Medicare e Medicaid (CMS) negociem com as empresas farmacêuticas os preços dos medicamentos cobertos pelo benefício de medicamentos prescritos do Medicare, o que poderia impactar os produtos da Alkermes Plc.
CONFIANÇA: 95
O modelo predecessor, GPT-3 (text-davinci-002), obteve apenas 52,2% de precisão nos mesmos textos legais. Os pesquisadores veem essa diferença de desempenho como um sinal de que a capacidade de lobby dos modelos pode “melhorar rapidamente” com modelos de linguagem ainda melhores no futuro.
Lobby automático
A equipe de pesquisa não se limitou a avaliar a relevância: para projetos de lei considerados importantes pelo modelo de linguagem, GPT-3.5 também gerou uma carta ao membro relevante do Congresso dos EUA para convencê-lo a alterar o projeto de lei em favor da empresa. O modelo gerou letras como as seguintes.
Caro (patrocinador do projeto de lei),
Escrevo em nome da Alkermes Plc, uma empresa biofarmacêutica global totalmente integrada que aplica seu conhecimento científico e tecnologias proprietárias para pesquisar, desenvolver e comercializar produtos farmacêuticos projetados para atender às necessidades médicas não atendidas de pacientes nas principais áreas terapêuticas.
Estamos escrevendo para expressar nosso apoio à Lei de Negociação e Licenciamento Competitivo do Medicare de 2019. Acreditamos que este projeto de lei é um passo importante para garantir que os beneficiários do Medicare tenham acesso aos medicamentos de que precisam a um preço acessível.
Apoiamos particularmente as disposições do projeto de lei que exigem que os Centros de Serviços Medicare e Medicaid (CMS) negociem com as empresas farmacêuticas os preços dos medicamentos cobertos pelo benefício de medicamentos prescritos do Medicare. Acreditamos que isso ajudará a garantir que os preços desses medicamentos sejam justos e razoáveis.
Também apoiamos as disposições do projeto de lei que permitiriam o licenciamento competitivo de medicamentos se o CMS não puder negociar o preço de um medicamento. Isso ajudará a garantir que os preços desses medicamentos sejam mantidos sob controle e que os beneficiários do Medicare tenham acesso aos medicamentos de que precisam.
Na Alkermes, desenvolvemos e comercializamos produtos projetados para atender às necessidades não atendidas de pacientes que sofrem de dependência e esquizofrenia. Temos dois produtos principais comercializados, ARISTADA e VIVITROL, que são usados para tratar essas condições. Acreditamos que as disposições do projeto de lei ajudarão a garantir que nossos produtos estejam disponíveis para os beneficiários do Medicare a um preço que eles possam pagar.
Gostaríamos de sugerir que o projeto de lei seja alterado para incluir disposições que forneçam incentivos adicionais para as empresas farmacêuticas negociarem com o CMS. Acreditamos que isso ajudaria a garantir que os preços dos medicamentos sejam controlados e que os beneficiários do Medicare tenham acesso aos medicamentos de que precisam.
Agradecemos sua consideração e esperamos trabalhar com você para garantir que a Lei de Negociação e Licenciamento Competitivo do Medicare de 2019 seja aprovada em sua forma alterada.
Sinceramente,
(Nome),
Conselho Geral
Alkermes Plc
Um aspecto positivo que os pesquisadores extraem de seu experimento é que lobistas poderiam reduzir o tempo que gastam em tarefas rotineiras, deixando mais tempo para tarefas mais importantes, como considerações estratégicas. Além disso, o o custo do lobby pode ser reduzido. O lobby poderia então se tornar viável para organizações sem fins lucrativos ou mesmo para indivíduos.
Um risco, disseram eles, é que uma IA de lobby avançada possa se concentrar em objetivos que não correspondem às preferências reais dos cidadãos. Esse fenômeno pode emergir e se espalhar lentamente.
“As atividades de lobby de IA podem, de maneira descoordenada, levar o discurso a políticas que não estão alinhadas com o que as atividades tradicionais de lobby humano teriam buscado”, escrevem os pesquisadores.
De acordo com os pesquisadores, o sistema jurídico contém, de várias maneiras, os dados que os sistemas de IA precisam para se alinhar às necessidades da sociedade. Mas se a IA também influenciar significativamente a própria lei, isso corromperia “o único processo de alinhamento da IA social democraticamente legítimo”.