dumaiРынки с ИИ медленнее приходили к эффективному распределению ресурсов
Препринт, ещё не рецензирован · ранние данные
Кратко
Авторы повторили классические опыты на смоделированных рынках, где вместо людей действовали разные языковые модели ИИ. Покупатели и продавцы одновременно назначали цены — это и есть двойной аукцион. Такие рынки медленнее приходили к устойчивому обмену или не приходили вовсе и распределяли ресурсы хуже рынков с людьми; результат заметно зависел от модели и роли участника.
Зачем это знать?
Для оценки ИИ в экономике одной способности отвечать на вопросы недостаточно: важно, как он ведёт себя рядом с другими участниками рынка. Пока этот вывод относится к симуляциям и не подтверждает, что реальные рынки с ИИ будут работать так же.
Разбор
Авторы взяли не абстрактный тест на «умение торговаться», а классический лабораторный эксперимент Смита 1962 года. В нём каждый участник знает только собственную оценку товара или свои издержки, а общий результат должен возникнуть без человека-координатора — за счёт последовательных заявок и сделок. Это важно: даже если равновесная цена заранее известна теоретически, рынок ещё должен суметь до неё добраться. Если этого не происходит, часть выгодных сделок не совершается, и общий выигрыш участников оказывается меньше возможного.
Исследователи заменили людей языковыми моделями и измеряли не только итог рынка, но и путь к нему: насколько быстро цены приближались к равновесию и насколько полно участники использовали доступные взаимовыгодные сделки. Дополнительно они разбирали отдельные решения агентов и сравнивали тексты их пошаговых рассуждений. В этих текстах переход к заключению сделки вместо очередной осторожной корректировки цены сопровождался сдвигом от стратегических рассуждений к ощущению срочности. То есть модель могла прекратить выстраивать долгую торговую стратегию не потому, что рынок уже достиг нужного состояния, а под влиянием внутреннего «надо действовать сейчас».
Такой подход отличается от многих прежних тестов экономических агентов, где результат сильно зависит от конкретных формулировок задания и его бывает трудно сопоставить с чётким эталоном. Здесь есть сразу два ориентира: математическое предсказание для рынка и результаты опытов с людьми. Авторы также выпустили открытый программный каркас, чтобы другие исследователи могли повторять такие проверки и сравнивать модели в одинаковых условиях.
Можно ли доверять
Это препринт с arXiv, поэтому работу ещё не проверили рецензенты. Кроме того, выводы основаны на симуляциях с языковыми моделями, а не на наблюдении за людьми или реальными рынками; перенос результата в экономику потребует отдельных проверок.
- Это препринт, результаты ещё не прошли независимую рецензию.
- Выводы получены в смоделированных рыночных экспериментах, а не на реальных рынках с автономно действующими LLM-агентами.
- Результаты зависят от выбранных моделей, ролей и устройства двойного аукциона; перенос на другие рынки не показан.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено