O que você precisa saber sobre Sakana AI

Acesse nossa biblioteca sob demanda para ver as sessões do VB Transform 2023. Cadastre-se aqui

O cenário da inteligência artificial generativa (gen AI) está em rápido estado de evolução atualmente, não apenas com OpenAI, Meta e Google competindo diretamente em modelos básicos, mas fazendo isso enquanto alguns de seus maiores talentos internos saem para lançar suas próprias startups de geração de IA.

No mês passado assistimos a uma das maiores deserções: Llion Jones, um dos co-autores do artigo de investigação seminal de 2017 “Attention Is All You Need”, que deu início à revolução da IA ​​generativa ao desenvolver a arquitectura dos transformadores utilizados na liderança de grandes linguagens. models (LLMs), anunciou que havia deixado o Google para fundar uma nova startup.

Esta semana, aprendemos exatamente no que ele está trabalhando: Sakana AI, uma nova empresa de IA com sede em Tóquio.

Juntando-se a ele como cofundador da Sakana está David Ha, ex-chefe de pesquisa da Stability AI e ex-pesquisador do Google Brain.

Transformação VB 2023 sob demanda

Você perdeu uma sessão do VB Transform 2023? Registre-se para acessar a biblioteca sob demanda para todas as nossas sessões em destaque.

Juntos em Sakana, procuram um modelo surpreendentemente diferente para a IA: um modelo de biomimética, que olha especificamente para a inteligência colectiva em sistemas encontrados na natureza, como cardumes de peixes e colmeias, para conceber modelos de IA que sejam flexíveis, reactivos e economicamente eficientes.

Na Sakana AI, a visão de Jones é capitalizar esta tecnologia para criar um modelo de IA generativo inovador, proficiente na geração de texto, imagens, código e conteúdo multimídia.

Até agora, a Sakana tem mantido os seus apoiantes em segredo, recusando-se a comentar à Reuters sobre quem está a investir na empresa.

Sakana AI distingue-se por uma abordagem inovadora que envolve o desenvolvimento de vários modelos menores de IA que colaboram, como um enxame, para fornecer resultados complexos.

Esta metodologia desafia a tendência dominante de construção de sistemas extensos de IA.

A Sakana AI está confiante de que a sua abordagem baseada em enxames, inspirada na inteligência colectiva, pode fornecer resultados equivalentes aos de sistemas maiores, ao mesmo tempo que é mais económica e flexível.

“As formigas se movem e formam dinamicamente uma ponte por si mesmas, que pode não ser a ponte mais forte, mas podem fazê-lo imediatamente e se adaptar aos ambientes”, disse Ha à Bloomberg em entrevista. “Acho que esse tipo de adaptação é um dos conceitos muito poderosos que vemos nos algoritmos naturais.”

O nome Sakana foi derivado de uma palavra japonesa para peixe (さかな), destinada a provocar “um cardume de peixes se unindo e formando uma entidade coerente a partir de regras simples”, disseram os dois fundadores ao The Financial Times.

A decisão da Sakana AI de estabelecer a sua base em Tóquio é um movimento calculado. Com a sua infraestrutura técnica avançada e um conjunto de talentos altamente qualificados, Tóquio está preparada para estimular o crescimento de startups de IA e atrair conhecimentos internacionais. Sakana planeia explorar estes benefícios para reforçar as suas actividades de investigação e desenvolvimento, embora a empresa ainda não tenha criado espaço de escritório para a sua nova sede.

A visão da IA ​​Sakana transcende a criação de modelos de IA, já que Ha e Jones sublinham as deficiências dos sistemas contemporâneos de IA que muitas vezes acabam por ser inflexíveis. Em vez disso, propõem modelos de IA que incorporam princípios da computação evolutiva, inspirados na adaptabilidade da natureza. Esta abordagem poderia potencialmente resolver problemas relacionados com custos e segurança em sistemas de IA.

Os cofundadores disseram à CNBC que acreditavam que o foco do Google em um único tipo de tecnologia generativa de IA, grandes modelos de linguagem, era um erro “porque é uma estrutura bastante restritiva”, disse Jones.

Os cofundadores disseram que estão conversando sobre o uso de LLMs, mas ainda não tomaram uma decisão final. No entanto, Ha não os descartou: “Eu ficaria surpreso se os modelos de linguagem não fizessem parte do futuro”, disse ele à CNBC.

A transição de Jones e Ha do Google para a Sakana AI é um desenvolvimento notável no setor de IA, especialmente no domínio da IA ​​generativa.