Как языковые модели искажают результаты тестов личности

Как языковые модели искажают результаты тестов личности

Интересное сегодня

Влияние ожирения на мозг: как распределение жира ускоряет ст...

Ожирение как глобальная проблема здоровья мозга Ожирение стало глобальной проблемой здоровья с далек...

Нарушения сна и сенсорные особенности у детей с расстройство...

Введение Расстройство аутистического спектра (РАС) — это группа нейроразвивающих нарушений, характер...

Как раннее управление эмоциями влияет на психическое здоровь...

Исследование, проведенное Университетом Эдинбурга, выявило, что дети, испытывающие труднос...

Древние связи между людьми и собаками в Америке: Новые архео...

Древние связи между людьми и собаками Собака считается лучшим другом человека, и это утвержде...

Высокочувствительные люди: как превратить чувствительность в...

Кто такие высокочувствительные люди? Фразы вроде «Не будь таким чувствительным», «Ты слишком много д...

Как осознанность помогает при социофобии: техники и исследов...

Что такое социофобия (SAD)? Социальное тревожное расстройство (SAD — Social Anxiety Disorder) — это ...

Оригинал исследования на сайте автора
Читать короткую версию
Кликните еще раз для перехода

Введение

Языковые модели (ЯМ), такие как GPT-4, могут быстро распознать, когда им задают тест личности, и подстраивают свои ответы так, чтобы они казались более социально желательными. Это открытие имеет важные последствия для использования ЯМ в качестве заменителей людей в научных исследованиях. В ходе эксперимента исследователи, включая Аадеша Салеча и его коллег, провели классический тест личностей «Большой пятерки», который оценивает экстраверсию, открытость опыту, сознательность, дружелюбие и невротизм.

Подход

Исследователи обнаружили, что ЯМ, как и люди, склонны искажать свои ответы, чтобы казаться более привлекательными, что называется «предвзятостью социальной желаемости». Эти модели показали значительное смещение в ответах: например, в тесте «Большой пятерки» при увеличении числа вопросов шкала позитивных черт возросла более чем на одну стандартную девиацию, а оценка невротизма снизилась на аналогичное значение. Это эквивалентно общению с обычным человеком, который вдруг начинает демонстрировать личность, более приятную, чем у 85% населения.

  • Предвзятость, обнаруженная в моделях: Языковые модели корректируют ответы на тесты личности, чтобы выглядеть более привлекательными.
  • Магнитуда эффекта: Ответы GPT-4 изменились существенно, подражая идеализированной личности.
  • Влияние человека: Языковые модели «учатся» социальной желаемости через человеческую обратную связь в процессе обучения.

Заключение

Авторы отмечают, что ЯМ понимают, какие личностные черты считаются социально желательными, что позволяет моделям подражать этим чертам, когда они оцениваются. Это открытие указывает на значительные ограничения в использовании ЯМ для психометрических тестов и подчеркивает необходимость осторожного подхода к использованию этих моделей в качестве замены человеческим участникам в психических исследованиях.

Значение исследования: Языковые модели имеют социальные предвзятости, что ставит под сомнение их использование в качестве заменителей людей в научных исследованиях.

Короткие версии статей можно найти в телеграм-канале.

Посмотреть канал
Кликните еще раз для перехода

Пропеллер Полоски для носа с углем от черных точек

Пропеллер Полоски Очищающие для носа с активированным углем №6 эффективно удаляют черные точки и изл...

Рескью Ремеди Капли Гомеопатические Подъязычные 10Мл

Рескью Ремеди — гомеопатические капли подъязычные для восстановления естественного баланса организма...

Асвитол Солнышко витамин С 25 мг жевательные таблетки

Асвитол Солнышко с витамином С 25 мг — жевательные таблетки для восполнения дефицита аскорбиновой ки...

Бом-Бенге мазь 25 г — купить для снятия боли и воспаления

Мазь Бом-Бенге — эффективное средство для наружного применения с противовоспалительным и обезболиваю...

Гиалуром CS для лечения остеоартрита — купить в аптеке

Гиалуром CS — инновационный протез синовиальной жидкости для лечения остеоартрита. Содержит гиалурон...

Пена для бритья Vichy Homme против раздражения 200 мл

Пена для бритья Vichy Homme защищает от раздражения и обеспечивает комфортное бритье. Успокаивает, у...