Descobrimos algo preocupante sobre modelos de IA: se o problema for muito difícil, eles desistem imediatamente 19f6l
Pesquisadores da Apple descobriram que os modelos de raciocínio se cansam de pensar e desistem de problemas complexos Alguns especialistas apontam que testes realizados pela Apple apresentaram certos problemas 6v5j32
Dizer que as máquinas não pensam é uma ilusão. Não somos nós que dizemos isso, é um grupo de pesquisadores da Apple que acaba de publicar um estudo revelador intitulado exatamente assim ("A ilusão do pensamento"). Nele, os especialistas analisaram o desempenho de vários modelos de IA com a capacidade de "raciocinar", e suas conclusões são impressionantes... e preocupantes. 4h164s
Quebra-cabeças para IAs que "raciocinam" 5r4m2o
O normal ao avaliar a capacidade de um modelo de IA é usar benchmarks com testes de programação ou matemática, por exemplo. Em vez disso, a Apple criou vários testes baseados em quebra-cabeças lógicos que eram totalmente novos e, portanto, não podiam fazer parte do treinamento desses modelos. Claude Thinking, DeepSeek-R1 e o3-mini participaram da avaliação.
Modelos com falhas 5g2j33
Em seus testes, eles descobriram que todos esses modelos de raciocínio acabavam se chocando contra uma parede ao se depararem com problemas complexos. Nesses casos, a precisão desses modelos caía vertiginosamente para 0%. Não importava que você desse a esses modelos mais recursos ao tentar resolver esses problemas. Se eles apresentassem alguma dificuldade, não conseguiam lidar com a situação.
IAs se cansam de pensar 1ry5m
Na verdade, algo curioso aconteceu. À medida que os problemas se tornavam mais complexos, esses modelos começavam a pensar não mais, mas menos. Eles usavam menos fichas para resolvê-los e desistiam mais cedo, apesar de poderem usar recursos ilimitados.
Nem mesmo com ajuda 5v4026
Os ...
Matérias relacionadas
Há um alimento que as baratas não am e você com certeza tem na sua cozinha