Apresentando o PaLM 2

Quando  olhamos  para os maiores avanços em IA na última década, a Google tem estado na vanguarda de muitos deles. O nosso trabalho inovador em modelos fundacionais tornou-se a base para a indústria e para os produtos alimentados com IA que milhares de milhões de pessoas usam diariamente. À medida que continuamos a avançar com estas tecnologias, de forma responsável, existe um grande potencial para usos transformacionais em áreas tão abrangentes quanto a saúde e a criatividade humana.

Ao longo da última década de desenvolvimento de IA, aprendemos que muito é possível à medida que se escalam as redes neurais - na verdade, já vimos capacidades surpreendentes emergirem de modelos de maiores dimensões. Mas aprendemos através da nossa investigação que não é assim tão simples o  “quanto maior, melhor” e que a criatividade da investigação é a chave para construírem ótimos modelos. Avanços mais recentes em como arquitetamos e treinamos modelos ensinaram-nos como desbloquear a multimodalidade, a importância de ter feedback humano no processo e como construir modelos mais eficientes do que nunca. Estes são blocos de construção poderosos à medida que continuamos a avançar na tecnologia de ponta em IA enquanto construímos modelos que podem trazer benefícios reais para as pessoas nas suas vidas diárias.

Apresentando o PaLM 2
Com base neste trabalho, estamos hoje a apresentar o PaLM 2, o nosso modelo de linguagem da próxima geração. O PaLM 2 é um modelo de linguagem da última geração com recursos multilínguas, de raciocínio e de codificação melhorados. 

• Multilinguagem: PaLM 2 é fortemente treinado em texto multilíngue, abrangendo mais de 100 idiomas. Isto melhorou significativamente a sua capacidade de entender, gerar e de traduzir texto com nuances - incluindo expressões idiomáticas, poemas e enigmas - numa ampla variedade de idiomas, um problema difícil de resolver. O PaLM 2 também foi aprovado em exames avançados de proficiência linguística com a classificação de mestre (mastery). 
• Raciocínio: O amplo conjunto de dados do PaLM 2 inclui artigos científicos e páginas da web que contêm expressões matemáticas. Como resultado, demonstra capacidades melhoradas ao nível da lógica, raciocínio de bom senso e na matemática.
• Programação: O PaLM 2 foi pré-treinado numa grande quantidade de conjuntos de dados de códigos-fonte disponíveis publicamente. Significa que se destaca em linguagens de programação populares como o Python e JavaScript, mas também pode gerar código especializado em linguagens como Prolog, Fortran e Verilog.

Uma família versátil de modelos
Mesmo sendo mais capaz, o PaLM 2 também é mais rápido e eficiente do que os modelos anteriores – e apresenta-se numa variedade de tamanhos, o que facilita a implementação numa ampla variedade de casos de uso. Vamos disponibilizar o PaLM 2 em quatro dimensões, do menor ao maior: Gecko, Otter, Bison e Unicorn. O Gecko é tão leve que pode funcionar em dispositivos móveis e é rápido o suficiente para aplicações interativas ótimas no dispositivo, mesmo quando está offline. Esta versatilidade significa que o PaLM 2 pode ser ajustado para proporcionar suporte a classes inteiras de produtos de mais maneiras e para poder ajudar mais pessoas.

Alimentando 25 produtos e funcionalidades da Google
Na I/O de hoje, anunciamos 25 novos produtos e recursos baseados no PaLM 2, e dezenas de equipas já o estão a usar na Google. Isto significa que o PaLM 2 está a trazer o que há de mais avançado em recursos de IA diretamente para os nossos produtos e para as pessoas — incluindo consumidores, programadores e empresas de todas as dimensões de todo o mundo. Seguem-se alguns exemplos:

• A partir de hoje, os recursos multi-línguas melhorados do PaLM 2 estão a possibilitar a expansão do Bard para novos idiomas. Para além de que já está a alimentar a nossa atualização de programação  anunciada recentemente.
• Os recursos do Workspace para ajudar o utilizador a escrever no Gmail e no Google Docs e a ajudá-lo a organizar-se no Google Sheets estão a aproveitar as potencialidades do PaLM 2 numa velocidade tal que ajuda as pessoas a trabalhar melhor e muito mais rapidamente.
• O Med-PaLM 2, treinado pelas nossas equipas de investigação em saúde com conhecimento médico, pode responder a perguntas e fazer resumos a partir de uma variedade de textos médicos densos. Alcançou resultados extraordinários na área da competência médica e foi o primeiro grande modelo de linguagem a obter a classificação de “especialista” em perguntas ao estilo do Exame de Medicina dos EUA. Atualmente, estamos a acrescentar recursos multimodais para sintetizar as informações como raios-x e mamografias para, um dia, melhorar os resultados dos pacientes. O Med-PaLM 2 será aberto a um pequeno grupo de clientes de Cloud cujo feedback deveremos receber no final do verão de forma a identificar casos de uso seguros e úteis.
• Sec-PaLM trata-se de uma versão especializada do PaLM 2 treinada em casos de uso de segurança e um salto potencial para a análise de cibersegurança. Disponível através da Google Cloud, utiliza a IA para ajudar a analisar e a explicar o comportamento de scripts potencialmente maliciosos e a detectar melhor quais os scripts que são realmente ameaças a pessoas e organizações em tempo recorde.
• Desde março, temos vindo a disponibilizar uma preview da API do PaLM a um pequeno grupo de programadores. A partir de hoje, os programadores podem registar-se para usar o modelo PaLM 2 ou os clientes podem usar o modelo no Vertex AI com privacidade, segurança e governança de nível empresarial. O PaLM 2 também está a capacitar o Duet AI for Google Cloud, um colaborador de IA generativo projetado para ajudar os utilizadores a aprender, a construir e a trabalhar mais rápido do que nunca. 

Prever o futuro da IA

O PaLM 2 mostra-nos o impacto de modelos altamente capazes de várias dimensões e velocidades — e que os modelos de IA versáteis trazem benefícios reais para todos.