2025年11月と12月に、Simon Willisonの「自転車に乗るペリカン」ベンチマークに触発されて、当時のLLMに30の類似プロンプトからSVGを生成させました。たとえば「タコがパイプオルガンを演奏しているSVGを生成してください」といったものです。Simonはその実験を自身のブログ[1]で言及しました。

9か月が経ち、はるかに強力なモデルがリリースされたので、今日その実験を再び試しました。リンク先のサイトに結果が表示されています。OpenRouterで6つのモデルを通じて10のプロンプトを実行するのに約20ドルかかったので、今のところそこで止めました。

[1] https://simonwillison.net/2025/Nov/25/

コメントURL：https://news.ycombinator.com/item?id=49696402 ポイント：77 # コメント：29

主要エンティティ：企業：OpenRouter、Open AI、Anthropic、Google、Deep Seek、Alibaba、Sakana AI、Z.ai (Zhipu)、x AI | 人物：Simon Willison

FAQ：ペリカン自転車ベンチマークとは何ですか？

これはSimon Willisonの「自転車に乗るペリカン」プロンプトに触発されたテストで、LLMが類似のプロンプトからSVGを生成します。

FAQ Q：ペリカン自転車ベンチマークとは何ですか？

FAQ A：これはSimon Willisonの「自転車に乗るペリカン」プロンプトに触発されたテストで、LLMが類似のプロンプトからSVGを生成します。