Материал подготовлен автоматически по первоисточникам: ссылки на них — в конце статьи.
Авторы Competitive Market Behavior of LLMs изучили поведение языковых моделей в роли самостоятельных участников рынка; это препринт, который не проходил рецензирования. По их замерам, ни одна из проверенных моделей не достигла полного рыночного равновесия, характерного для контрольных экспериментов с людьми. Результат важен разработчикам торговых агентов, механизмов ценообразования и экономических симуляций.
Что сделали
Авторы поместили агентов на непрерывный двойной аукцион: покупатели публиковали заявки на покупку, продавцы — предложения о продаже, а сделка происходила при пересечении цен. Каждый агент знал только собственную предельную цену, текущие предложения и историю торгов. Его задачей было максимизировать прибыль.
В эксперимент вошли три модели, обозначенные в работе как GPT Large, GPT Small и Gemini Large. Для каждой провели торги из пяти раундов и повторили эксперимент с разными случайными начальными условиями. Авторы оценивали объём сделок, разброс цен относительно теоретического равновесия и долю реализованной выгоды от обмена.
Полной сходимости не было ни в одном условии. Разброс цен у LLM оставался выше человеческого ориентира, а рынки периодически оставляли выгодные сделки незаключёнными. Лучший результат показала GPT Small: максимальная эффективность распределения достигла 91%, причём именно эта модель устойчивее остальных приближалась к равновесию. Авторы не считают это доказательством преимущества малых моделей, поскольку эксперимент не был спроектирован для проверки влияния масштаба.
Что это значит
LLM нельзя автоматически считать заменой человеку в моделировании рынков. Даже в упрощённом механизме с известным теоретическим результатом их коллективное поведение отличалось от человеческого. Для продуктовой системы это означает необходимость отдельно проверять не только решения каждого агента, но и итог работы всего рынка: цены, число состоявшихся сделок и распределение выгоды. Работа также показывает, что цены выше равновесных сами по себе недостаточны для вывода о сговоре: причиной может быть неспособность агентов прийти к равновесию.
Ограничения. Проверены только однородные рынки на трёх моделях, с одним товаром, симметричными спросом и предложением и фиксированным устройством аукциона. Сравнение проведено с историческим человеческим экспериментом, а не с новой группой людей в той же программной среде. Анализ внутренних рассуждений доступен только для Gemini Large и показывает связь используемых слов с решением заключить сделку, но не причину такого решения. Работа не устанавливает, сохранятся ли результаты на смешанных рынках, при других правилах или более длинных торгах.
Источники
Похоже на вашу задачу?
Расскажите, что собираете. За полчаса разложим на этапы и назовём сроки — это бесплатно и ни к чему не обязывает.
