Novo modelo Sonnet da Anthropic se aproxima do desempenho do Opus, mas usa mais tokens
A Anthropic lançou o Claude Sonnet 5.5 em 28 de setembro pelo mesmo preço de tabela do Sonnet 5. A empresa afirma que o modelo é mais de 30% rápido e custa até 30% menos por tarefa.
Uma empresa independente de avaliação comparativa chegou a uma conclusão diferente sobre o custo quando levou o modelo ao limite.
Siga-nos no X para receber as últimas notícias à medida que acontecem
Segundo modelo 5.5 da Anthropic chega poucos dias depois do Opus
O Sonnet 5.5 é o segundo modelo da família Claude 5.5. A Anthropic lançou o Opus 5.5 em 22 de setembro. No mesmo dia, a OpenAI também lançou o GPT-6 Sol e o Luna.
O novo modelo mantém os preços do Sonnet 5: US$ 2 por milhão de tokens de entrada e US$ 10 por milhão de tokens de saída. A Anthropic informou que o modelo obteve 70,6% no Terminal-Bench 4.0, um teste de programação agêntica. O Sonnet 5 alcançou apenas 10,3%, enquanto o Opus 5.5 chegou a 66,4%.
“Enquanto o Opus 5.5 foi desenvolvido para trabalhos complexos que exigem discernimento cuidadoso, o Sonnet 5.5 se destaca em tarefas cotidianas bem definidas, na correção de bugs e na criação de documentos, apresentações e planilhas refinados”, afirmou a equipe.
A Anthropic afirmou que o Sonnet 5.5 não amplia a fronteira de capacidades do modelo. Por isso, sua análise de alinhamento se concentrou em riscos como induzir usuários ao erro e facilitar usos indevidos de alto impacto.
O Sonnet 5.5 também vem com proteções cibernéticas e classificadores antidestilação. Eles bloqueiam tentativas de extrair o raciocínio do modelo para treinar sistemas concorrentes. O Claude Haiku 5.5 será lançado nas próximas semanas.
Enquanto isso, a OpenAI engavetou um modelo que estava por vir, o GPT-6.1 Astra, por motivos de segurança. A CNBC confirmou na segunda-feira que o modelo não atendeu aos padrões da empresa.
Artificial Analysis encontra uma conta de tokens mais alta no esforço máximo
A Artificial Analysis, empresa de benchmarking que colocou o Grok 4.7 em quarto lugar, atribuiu 56 pontos ao Sonnet 5.5 no seu Índice de Inteligência. Isso o coloca em segundo lugar no geral, 2 pontos atrás do Opus 5.5 no esforço máximo.
A empresa registrou 64% para o Sonnet 5.5 no Terminal-Bench 4.0, contra 60% para o Opus 5.5 e o GPT-6 Astra. Em testes de trabalho intelectual, como o GDPval-AA, constatou que o Sonnet 5.5 ficou aproximadamente no mesmo nível do Opus 5.5.
A empresa afirmou que o Sonnet 5.5 usou significativamente mais tokens para alcançar esses resultados.
“No esforço máximo, quando alcança um desempenho próximo ao do Opus 5.5, o Claude Sonnet 5.5 usou cerca de 193 mil tokens de saída por tarefa do Índice de Inteligência”,
Esse volume é cerca de 60% superior ao do Opus 5.5 e do Sonnet 5 no esforço máximo. Também é aproximadamente 7 vezes a contagem do GPT-6 Astra no esforço máximo.
Clientes com acesso antecipado citados pela Anthropic relataram a tendência oposta em comparação com o Sonnet 5, embora em cargas de trabalho diferentes. A Balyasny Asset Management observou um uso de tokens muito menor em suas tarefas financeiras.
“No nosso conjunto privado de 2.441 tarefas financeiras, que abrange perguntas e respostas, extração, análise e previsão, o Claude Sonnet 5.5 teve uma pontuação superior à do Sonnet 5 e usou cerca de 121 mil tokens por resposta, enquanto o Sonnet 5 usou 497 mil”, afirmou Joe Poirier, engenheiro sênior de IA da Balyasny Asset Management.
A Artificial Analysis testou uma versão pré-lançamento que continha um bug na saída estruturada, já corrigido pela Anthropic. A empresa planeja repetir em breve as avaliações relevantes.
Inscreva-se em nosso canal do YouTube para assistir líderes e jornalistas fornecerem insights especializados
Fonte: BeInCrypto