HeadlinesBriefing favicon HeadlinesBriefing.com

Benchmark pelicano-bicicleta: SVG LLM 2026

Hacker News •
×

Em novembro e dezembro de 2025, inspirado pelo benchmark do pelicano andando de bicicleta de Simon Willison, fiz os LLM da época criarem SVGs a partir de trinta prompts semelhantes, como “Gere um SVG de um polvo tocando um órgão de tubos”. Simon mencionou esse experimento em seu blog [1].

Nove meses se passaram e modelos muito mais fortes foram lançados, então tentei o experimento novamente hoje. O site vinculado mostra os resultados. Executar dez dos prompts em seis modelos no OpenRouter custou cerca de vinte dólares, então parei por aí por enquanto.

[1] https://simonwillison.net/2025/Nov/25/

URL dos comentários: https://news.ycombinator.com/item?id=49696402 Pontos: 77 # Comentários: 29

Entidades principais: Empresas: OpenRouter, Open AI, Anthropic, Google, Deep Seek, Alibaba, Sakana AI, Z.ai (Zhipu), x AI | Pessoas: Simon Willison