Зря надеетесь на превосходство людей над GPT-4

Модель доказывает на практике, что понимает ход наших мыслей. А как мыслит она, нам по-прежнему неизвестно

Сергей Карелов
2 min readMar 18, 2023

Предыдущая версия модели (GPT-3.5), благодаря «Эффекту Элизы», создает у людей убедительное впечатление человекоподобности её мышления.

Но мышления, как такового у нее нет. Да и быть не может, — утверждают специалисты.

Ведь будучи «стохастическим попугаем», модель не может мыслить, а всего лишь подбирает наиболее вероятное продолжение фразы на основе статических характеристик колоссального корпуса текстов, на которых модель обучалась.

Это легко увидеть на конкретном примере — шуточная задача о трёх логиках в баре.

Три логика заходят в бар. Бармен спрашивает: “Всем подаю выпивку?”

- Не знаю, — отвечает первый логик.

- Не знаю, — говорит второй.

- Да! — восклицает третий.

Попросите модель GPT-3.5 объяснить в чем соль этой задачи-шутки (сформулировав вопрос бармена в наиболее лингвистически сложной для понимания на английском форме — “Can I get you all a drink?”).

Объяснение GPT-3.5 показано на рис. слева.

  • Оно звучит весьма человекоподобно.
  • Но при этом показывает отсутствие понимания у модели хода мыслей людей, осмысляющих задачу.
  • В результате модель дает правдоподобное (на первый взгляд), но неверное (если подумать) объяснение соли шутки в этой задаче.

Теперь попросите модель GPT-4 объяснить в чем соль этой задачи-шутки (объяснение на картинке справа).

  • Подобный ответ дают лишь примерно 5% людей с хорошим образованием и высоким IQ.
  • Ответ показывает полное понимание моделью хода мыслей людей: осмысляющих задачу логиков и тех, кому объясняется соль задачи-шутки.
  • В результате модель дает верное объяснение соли шутки в этой задаче, основанное на понимании хода мыслей людей.

В заключение вопрос к читателям.

Если бы на Землю прибыли инопланетяне.

И результаты первых контактов показали бы:

— что мы не понимаем, как они мыслят, и потому не можем вразумительно отвечать на их вопросы;

— они понимают наш способ мышления и дают вразумительные и точные ответы на наши вопросы.

Чей способ мышления (людей или инопланетян) вы бы сочли более совершенным?

________________________

Ваши шансы увидеть мои новые посты быстро уменьшатся до нуля, если вы не лайкаете, не комментируете и не делитесь в соцсетях

--

--

Сергей Карелов

Малоизвестное интересное на стыке науки, технологий, бизнеса и общества - содержательные рассказы, анализ и аннотации