Сюжет 31. Для хорошего ответа нужен правильный вопрос

Когда много спрашивают –

мало думают и плохо помнят.

Максим Горький

После появления первой версии ChatGPT в конце 2022 года у человечества появилась новая компьютерная игрушка. Игрушка оказалась настолько популярной, что за два месяца побила все рекорды и набрала 100 миллионов игроков. Диалоги с чат-ботом – так можно было назвать новую популярную забаву.

Каких только диалогов там не было! Одним по глубине содержания позавидовал бы древнегреческий мыслитель Сократ, на чьих диалогах учились многие мыслители Эллады. Другие напоминали общение психиатров с обитателями сумасшедшего дома. Большинство были банальны или провокационны.

В первые месяцы никто не верил, что от такого общения может быть практическая польза. Но количество пользователей быстро росло. Людьми двигали два основных чувства – любопытство и удивление. Сначала любопытство: а что может эта штука, о которой все вокруг говорят? Затем удивление: он и на это вопрос смог ответить!

Быстро выяснилось, что на многие вопросы чат-бот отвечает вполне качественно. У технологии «спроси Google» появился конкурент – людям нравилось, что ответ не нужно искать и собирать по множеству ссылок. Вот только сразу возникла проблема.

Подавляющее большинство пользователей поисковых систем подходят к своим вопросам предельно просто. Мало кто думает над составлением умных запросов – вводят два-три слова и запускают поиск. Дальше все равно нужно вручную открывать по ссылкам ресурсы, читать материалы и выискивать нужные сведения.

В общении с чат-ботом все по-другому. Вопросы нужно было задавать «по-человечески», формулируя нормальные предложения. Качество ответа чат-бота напрямую зависело от качества вопроса пользователя. На абстрактные, без контекста и деталей вопросы чат-бот отвечал предельно обтекаемо. Ответ был вроде бы правильным, но, как правило, бесполезным.

Еще одним поворотным моментом стало интересное эмерджентное (непредвиденное) свойство первых LLM, которое удивило и восхитило даже их создателей. Оказалось, что добавление в конец вопроса простого предложения «Думай пошагово!» на десятки процентов снижало количество ошибок и улучшало качество ответа чат-бота.

... читайте сюжет в полной версии

поделиться в: