Технології / ШІ
🤖
Саймон Віллісон перевіряє фронтирні моделі жартівливим SVG-тестом
Simon Willison · 6 жовт. 18:20
Саймон Віллісон іронічно відгукнувся на заяву про те, що бенчмарки «насичені» й фронтирні моделі тестують абсурдними завданнями. Він прогнав через чотири моделі — зокрема версії Claude, GPT, Gemini та Mistral різного класу — той самий запит згенерувати SVG-зображення «броненосця в сітчастих колготках, який переходить дорогу в недозволеному місці на Марсі», і порівняв результати за рендером. Запис опубліковано 6 жовтня 2026 року.
❧
Чому це важливо
Це ілюстрація практики швидкого порівняння моделей на конкретному творчому завданні поза формальними бенчмарками. Віллісон регулярно фіксує стан фронтирних моделей такими спонтанними тестами.
Навіть випадковий запит стає інструментом порівняння моделей; генерація SVG відображає відмінності у здатності моделей до просторового й візуального синтезу.
❧