Mistral AI lança Leanstral 1.5: um modelo gratuito para verificação formal com resultados recordes

A Mistral AI lançou o Leanstral 1.5, um modelo gratuito licenciado sob Apache-2.0 com 119B de parâmetros no total e apenas 6B ativos, entregando uma melhoria significativa de desempenho em verificação formal. O modelo satura o miniF2F, resolve 587 dos 672 problemas do PutnamBench e alcança resultados de última geração no FATE-H (87%) e no FATE-X (34%). O treinamento envolveu treinamento intermediário, ajuste fino supervisionado e aprendizado por reforço com CISPO em dois ambientes de aprendizado por reforço: um ambiente multiturno para prova de teoremas com feedback do compilador Lean, e um ambiente de agente de código que opera como um desenvolvedor em um sistema de arquivos bruto. O Leanstral 1.5 mostra forte escalabilidade em tempo de teste, com desempenho no PutnamBench melhorando de 44 problemas resolvidos com 50 mil tokens para 587 com 4 milhões de tokens. Ele também se destaca em verificação de código, provando garantias de complexidade de tempo para árvores AVL e descobrindo 5 bugs anteriormente desconhecidos em 57 repositórios testados. O modelo é totalmente disponibilizado como código aberto via Hugging Face e um endpoint de API gratuito.