Mistral Large 4: um bilião de parâmetros, feito na Europa

A Mistral, a empresa francesa de IA, apresentou a 6 de outubro o Mistral Large 4. O modelo tem um bilião de parâmetros, os valores internos que um modelo ajusta durante o treino, e usa 49 mil milhões em cada resposta. Lê texto e imagens e responde em texto.

Aberto. O modelo já está disponível pela API da Mistral. A 27 de outubro saem os pesos, o ficheiro que permite a qualquer empresa descarregar o modelo e corrê-lo nos seus próprios servidores, sem enviar dados para fora. A licença ainda não foi publicada.

Europeu. Foi treinado de raiz em dois meses, em cerca de 4.000 processadores da NVIDIA nos centros de dados europeus da Mistral, e cobre mais de 160 línguas, incluindo todas as oficiais da União Europeia.

Arthur Mensch, CEO da Mistral, afirmou que a ideia de que a Europa não consegue competir é falsa. Para empresas com dados sensíveis, um modelo aberto desta dimensão é mais uma opção para usar IA mantendo a informação dentro de casa.