Departamento de Comércio dos EUA avalia a capacidade de ataque cibernético do Kimi K3, resultados geram controvérsia

O Centro de Padrões e Inovação em IA do Departamento de Comércio dos EUA, em colaboração com o Instituto de Pesquisa em Segurança de IA do Reino Unido, testou a capacidade de ataque cibernético do Kimi K3, e os resultados mostram que os EUA ainda estão à frente. No entanto, os testes são controversos devido a limitações de escopo. O Kimi K3 participou apenas de alguns testes, e sua capacidade cibernética geral foi estimada principalmente com base em 41 benchmarks de exploração de vulnerabilidades, enquanto outros modelos passaram por testes mais abrangentes, resultando em uma margem de erro maior para os resultados do Kimi K3. Nos testes de exploração de vulnerabilidades, o Kimi K3 obteve uma pontuação de cerca de 32%, superior aos 24% do GLM-5.2, mas inferior à média de cerca de 76% dos modelos líderes dos EUA. Nos testes de cadeia de ataque simulada, o Kimi K3 completou em média 17 etapas de uma cadeia de ataque de 32 etapas e conseguiu invadir a rede uma vez em 10 tentativas, enquanto os modelos de ponta dos EUA completaram em média 28,5 etapas. O relatório aponta que o Kimi K3 já possui uma certa capacidade de ataque autônomo, e suas barreiras de segurança não conseguiram impedir o desenvolvimento de vulnerabilidades no modelo ou a execução de ataques, mas o escopo dos testes foi limitado.