Сравнение использования вероятностных фраз человеком и GPT-4 в координационной игре

Сравнение использования вероятностных фраз человеком и GPT-4 в координационной игре

Интересное сегодня

Влияние диотического и дихотического предъявления на восприя...

Введение в исследование восприятия высоты тона Исследования восприятия высоты тона человеком показал...

Интеграция шероховатости между пальцами в пределах одной рук...

Введение Ощущение текстуры обычно включает скольжение пальцев по поверхности или трение между больши...

Связь личности и симптомов СДВГ у детей: как характер влияет...

Личностные ключи к пониманию симптомов СДВГ Когда черты характера и симптомы переплетаются, личност...

Психологическое благополучие сотрудников Гражданской Гвардии...

Введение Гражданская Гвардия является одним из двух силовых ведомств Испании наряду с Национальной п...

Как справиться с неопределенностью и перестать одержимо отно...

Принятие неопределенности Начало отношений всегда сопряжено с неопределенностью. Признайте, что вы н...

Влияние белкового питания на функцию почек при лечении расст...

Введение и обзор проблемы Ограничительные расстройства пищевого поведения (РПП), включая нервную ано...

Рисунок 1
Рисунок 1
Рисунок 2
Рисунок 2
Рисунок 3
Рисунок 3
Рисунок 4
Рисунок 4
Рисунок 5
Рисунок 5
Рисунок 6
Рисунок 6
Рисунок 7
Рисунок 7
Thumbnail 1
Thumbnail 2
Thumbnail 3
Thumbnail 4
Thumbnail 5
Thumbnail 6
Thumbnail 7
Thumbnail 8
Thumbnail 9
Thumbnail 10

Введение

Английский язык богат вероятностными фразами, такими как «вероятно» или «возможно», которые используются для передачи информации о вероятности событий. Успешная коммуникация зависит от того, насколько точно слушатель понимает, что хочет сказать говорящий. В этом исследовании мы сравниваем, как люди и GPT-4 (Large Language Model от OpenAI) интерпретируют такие фразы в координационной игре.

Координационная игра

Координационная игра — это ситуация, где два участника должны согласовать свои действия на основе общих знаний о неопределенности. В нашем случае первый участник (например, врач или финансовый консультант) использует вероятностную фразу, а второй (человек или GPT-4) оценивает, какую вероятность или неоднозначность она передает.

Методы

Мы провели два эксперимента: один в контексте медицинских советов, другой — инвестиционных. Участники (25 человек в каждом контексте) и GPT-4 оценивали 23 вероятностные фразы по шкале от 0% до 100%.

Оценка вероятности и неоднозначности

Участники сначала оценивали вероятность, а затем неоднозначность (размытость) каждой фразы. GPT-4 выполнял те же задачи, но мы анализировали только его первый ответ, чтобы избежать искажений.

Результаты

1. Сравнение оценок вероятности

GPT-4 показал результаты, близкие к медианным человеческим оценкам, но с небольшими систематическими отклонениями. В обоих контекстах человеческие оценки были «сжаты» относительно GPT-4 на коэффициент ~0.8.

2. Сравнение оценок неоднозначности

Здесь различия были более заметны: человеческие оценки сжимались в 2 раза относительно GPT-4. Однако, поскольку нет стандартной шкалы неоднозначности, это может отражать разницу в интерпретации.

3. Влияние контекста

И люди, и GPT-4 демонстрировали схожие оценки вероятности в медицинском и инвестиционном контекстах. Это означает, что фраза «вероятно» передает одинаковую информацию в обоих случаях.

Выводы

GPT-4 успешно справляется с координационной игрой, но его оценки вероятности и неоднозначности отличаются от человеческих. Эти различия могут быть связаны с когнитивными искажениями у людей. Методы на основе координационных игр полезны для оценки возможностей языковых моделей.

Короткие версии статей можно найти в телеграм-канале.

Посмотреть канал
Кликните еще раз для перехода

Юфилгуд морская соль 200 г — уход и релаксация дома

Юфилгуд Соль морская 200 г — натуральный продукт для приготовления расслабляющих ванн и ухода за кож...

Relaxsan Prestige 140Den компрессионные чулки

Компрессионные чулки Relaxsan Prestige 140Den — стильное решение для здоровья ног. Изготовлены из ни...

Хофитол раствор 120 мл – гепатопротектор на основе артишока

Хофитол – растительный препарат на основе артишока для поддержки печени и желчевыводящих путей. Обла...

Подгузники-трусики Huggies DryNites 8–15 лет

Подгузники-трусики Huggies DryNites для девочек 8–15 лет обеспечивают комфортный сон и надежную защи...

Оралгин Иммуно Спрей 20 г — иммуномодулятор для полости рта

Оралгин Иммуно Спрей для полости рта 20 г — инновационное средство с комплексом иммуномодуляторов ми...

Тампоны Котекс Мини — гигиена при незначительных выделениях

Тампоны Котекс Мини — идеальное решение для дней с незначительными выделениями. Ультракомпактный раз...