Sumário
A geração de imagens AI normalmente requer um computador rápido. Mas com hardware e software otimizados, um smartphone pode fazer o trabalho, como mostra a Qualcomm.
Enquanto OpenAI e meio da jornada fornecem servidores dedicados para seus geradores de imagens – e cobram de seus clientes pelo uso deles – Difusão estável também pode ser executado em seu próprio hardware.
Para gerar imagens de alta qualidade em um tempo razoável, seu PC precisará de uma placa gráfica moderna (e cara). Outros dispositivos com chips otimizados para computação de IA, como Apple Silicon Macs ou iPhones , também pode fazer o trabalho. Os clientes Stable Diffusion estão disponíveis para esses sistemas há algum tempo.
Agora, pela primeira vez, a Qualcomm está demonstrando a geração de imagem de Stable Diffusion em um Android smartphone alimentado por um de seus chips.
O Qualcomm Snapdragon 8 Gen 2 foi lançado no final de 2022 e espera-se que alimente alguns dispositivos de alto preço Android smartphones de vários fabricantes este ano, como o recém-anunciado Samsung Galaxy S23.
De acordo com a Qualcomm, a execução do Stable Diffusion neste chip foi obtida por meio de quantização, compilação e aceleração de hardware.
A geração de imagens funciona offline
Supostos geradores de imagens baseados em Stable Diffusion já estão flutuando na Google Play Store. No entanto, essas são apenas interfaces da Web que dependem do poder de computação de um servidor e, portanto, requerem uma conexão com a Internet.
Isso não é necessário quando o Stable Diffusion é executado diretamente no smartphone – embora ocupe alguns gigabytes de espaço de armazenamento.
Uma imagem com resolução de 512 x 512 Pixels e 20 etapas de inferência leva menos de 15 segundos no chip Qualcomm, de acordo com o comunicado à imprensa. O aplicativo também oferece recursos como pintura interna, edição de imagem, transferência de estilo e super-resolução. Tudo isso funciona offline no dispositivo.
Difusão estável Android app é apenas uma prova de conceito por enquanto
Se a Stable Diffusion estará amplamente disponível em Android smartphones continua a ser visto. Por um lado, o vídeo da Qualcomm é apenas uma prova de conceito; um aplicativo correspondente ainda não existe e provavelmente exigiria um novo smartphone de última geração.
Por outro lado, alternativas comerciais como Midjourney e DALL-E 2 são ainda mais convenientes de usar e oferecem melhores resultados com menos esforço. No entanto, é notável o progresso tecnológico de poder realizar essas tarefas computacionalmente intensivas em um smartphone.
Qualcomm, o a segunda maior fabricante mundial de chips para smartphones , vem explorando a IA há vários anos. Em 2018, a empresa anunciou uma “unidade de processamento neural” otimizada para tarefas de IA em seu mais recente chip para smartphone. Nesse mesmo ano, a empresa investiu 100 milhões em startups de IA.
Em junho de 2022, a Qualcomm abriu caminho para aplicativos de IA mais diversificados com sua Pilha de IA , que combina várias ferramentas de IA para desenvolvimento com foco em chips móveis, como os encontrados em smartphones, carros ou headsets. O aplicativo Stable Diffusion demonstrado aqui também foi implementado e otimizado para smartphones usando o AI Stack, de acordo com a Qualcomm.