Четыре топовых чат-бота посадили за руль. Доехал только один

▪️ Экспериментаторы из проекта DrivingBench подключили топовые LLM к настоящей Toyota Corolla 2022 года и дали им управление рулём, газом и тормозом на закрытой площадке.
Цель - проверить, способна ли нейросеть провести реальную машину по маршруту, если дать ей инструменты и несколько попыток.

Каждому чат-боту выдали три попытки, и в итоге:

▪️ GPT-6 Astra проехала 100% маршрута со 2-й попытки за 5:22. В первый раз прошла половину, но не вписалась в сложный поворот.
▪️ Claude Fable 5.1 - 45%
▪️ Grok 4.6 - 11%
▪️ GPT-5.6 Sol - 6%

Средняя скорость движения составила около 1,5 км/ч, то есть машина ехала медленнее, чем идёт человек. Но поездка на LLM оказалась не просто медленной, а ещё и очень дорогой.

▪️ На управление автомобилем было потрачено 6,6 миллиона токенов. С учётом кеширования это обошлось в $7,74, а в пересчёте на расстояние - около $57,46 за километр. Это примерно в 500 раз дороже, чем стоимость бензина для этой поездки. Кажется, будущее ещё не наступило.

Подписывайтесь на МашТех