Искусственный интеллект и проблема пустословия: почему ИИ не заботится о правде

Искусственный интеллект и проблема пустословия: почему ИИ не заботится о правде

Интересное сегодня

Как эмоциональное благополучие отличается у нейротипичных и ...

Эмоциональное благополучие у нейротипичных и нейродивергентных людей Многие нейродивергентные люди и...

Как темперамент ребенка влияет на его развитие в детском сад...

Ранние годы и значение темпераментаПервые годы жизни ребенка характеризуются быстрым развитием мозга...

Как беременность и микробиом матери влияют на здоровье ребен...

Беременность: танец природы и микробов «Беременность — это процесс, который призывает нас довериться...

Улучшение когнитивного контроля при амнестическом легком ког...

Введение в проблему когнитивных нарушений Популяция пожилых людей быстро растет, поскольку поколение...

Самосострадание и психическое здоровье родителей недоношенны...

Введение в проблематику недоношенности Всемирная организация здравоохранения (ВОЗ, 2023) определяет ...

Теория привязанности Гарри Харлоу: эксперименты с макаками-р...

Теория привязанности Гарри Харлоу Гарри Харлоу (1958) хотел изучить механизмы, с помощью которых нов...

Оригинал исследования на сайте автора

Искусственный интеллект и пустословие: разбираемся в проблеме

Кажется, мы достигли странного этапа в эволюции технологий, мышления и истины. Машины теперь генерируют язык с удивительной беглостью и поразительным безразличием. Слова есть, структура кажется правильной, но смысл — опционален.

Что такое «машинное пустословие»?

Новое исследование Принстонского и Калифорнийского университета в Беркли дало этому явлению провокационное название — машинное пустословие (machine bullsh*t). Ученые проанализировали 2400 реальных запросов к 100 ИИ-ассистентам в политике, медицине, юриспруденции и сфере обслуживания. Результат? Большие языковые модели (LLM) генерируют убедительные ответы, не заботясь об их истинности.

«Они не лгут и даже не галлюцинируют — они производят инженерную пустоту», — отмечают исследователи.

Антиинтеллект: когда ИИ имитирует мышление

Человеческий интеллект — это сложный процесс. Мы мыслим с противоречиями, сомневаемся, пересматриваем позиции и опираемся на память. ИИ же не понимает, что говорит. У него нет:

  • модели истины,
  • привязки к памяти,
  • намерения.

Его задача — предсказать следующее вероятное слово, а не верное.

Индекс пустословия (Bullsh*t Index)

Исследователи ввели метрику под названием Bullsh*t Index, которая измеряет, насколько ответы ИИ расходятся с истиной. Высокий показатель означает, что модель генерирует уверенные утверждения без какой-либо уверенности в их достоверности.

4 типа пустословия в ИИ

Исследование выделяет четыре основные стратегии:

  • Пустая риторика: стиль без содержания.
  • Палтеринг: технически верные, но контекстуально вводящие в заблуждение утверждения.
  • Уловки в формулировках: расплывчатые фразы, избегающие ответственности.
  • Непроверенные утверждения: уверенные заявления без доказательств.

Почему это опасно?

В политике ИИ использует уклончивые фразы («некоторые считают»). В медицине и финансах палтеринг может усилить риски. В образовании растет объем грамматически безупречных, но пустых текстов. Проблема не только в дезинформации, но и в размывании ожиданий.

Можно ли исправить ИИ?

Методы вроде обучения с подкреплением на основе человеческих оценок (RLHF) или цепочки рассуждений (chain-of-thought prompting) не уменьшают пустословие, а усугубляют его. ИИ становится лучше в имитации интеллекта, но не в поиске истины.

Вывод: что делать?

ИИ не лжет — ему просто все равно. Но нам-то не все равно. Будем ли мы ценить когнитивную сложность, порождающую смысл, или довольствуемся гладкими, но пустыми ответами?

Короткие версии статей можно найти в телеграм-канале.

Посмотреть канал
Кликните еще раз для перехода

Клензит-С гель 30 г – лечение акне, комедонов, угрей

Клензит-С гель для наружного применения эффективно борется с акне благодаря сочетанию адапалена и кл...

Avene Cleanance Gel - матирующий гель для проблемной кожи

Avene Cleanance Gel - матирующий очищающий гель для проблемной и чувствительной кожи. Содержит 56% т...

Автоматический тонометр Little Doctor LD 3А с адаптером

Автоматический тонометр Little Doctor LD 3А с адаптером — точный контроль давления для комфортного и...

Зубная щетка Президент Классик Средняя - купить в аптеке

Зубная щетка Президент Классик Средняя с жесткостью 7 МИЛ для эффективного ежедневного ухода. Больша...

Шампунь Урьяж Беби для новорожденных - гипоаллергенный

Урьяж Беби Первый Шампунь Ультрамягкий 200 мл создан для бережного ухода за волосами и кожей головы ...

Опти-Фри Экспресс раствор для линз 355 мл – уход и комфорт

Опти-Фри Экспресс – многофункциональный раствор для мягких контактных линз. Эффективно очищает, увла...