Нейросеть вместо фокус-группы, консультанта и совета директоров. Шестьдесят человек в одной комнате
- -
- 100%
- +
ДАЛЬШЕ ЧАТА — 2
ШЕСТЬДЕСЯТ ЧЕЛОВЕК В ОДНОЙ КОМНАТЕ
Как собрать совет из шестидесяти голосов за один вечер — и другие приёмы работы с нейросетью для решений, памяти и роста
Можно начинать с этой книги. Первый шаг занимает пять минут.
Полная рукопись: 43 главы, семь мастерских, шпаргалка формулировок, гид для команд и план семи дней.
Игорь Чепелев
О чём эта книга
Первая книга учила разговаривать с нейросетью. Эта — учит решать.
Мой сосед Лао Ван спросил у нейросети, хороша ли его новая вывеска. Она сказала: отличная. Жена сказала: ужасная. Кому верить?
Правильный ответ — никому по отдельности. Эта книга о том, как перестать спрашивать один голос: собрать за вечер совет из шестидесяти спорящих персонажей, сыгранных нейросетью, устроить им честные дебаты «за» и «против» — и выжать из шума решение на одну страницу.
А дальше — всё, что начинается после толпы. Как решать, когда будущего не знает никто: сценарии вместо прогнозов, проценты вместо споров, растяжки против «ещё чуть-чуть». Как построить память, которая держит выводы дольше настроения. Как научить систему вашему стилю по вашим же правкам — и раз в неделю получать от неё доклад, что улучшить.
Уметь ничего не надо: ни программирования, ни специальных слов. Сорок три короткие главы, в каждой — история, приём и пять минут практики.
И одно обещание на входе, словами самого недоверчивого читателя этой рукописи: «Перепутаете репетицию с измерением — получите очень уверенный самообман со статистикой в приложении». Эта книга не даст перепутать: у каждого приёма в ней написаны его границы.
Вывеску, кстати, перекрасили: совет из сорока сыгранных прохожих встал на сторону жены со счётом двадцать девять против одиннадцати. Жёны были правы и до нейросетей — просто теперь у них есть протокол.
Введение. Шестьдесят человек в одной комнате
Проведите эксперимент. Прямо сейчас, займёт минуту.
Спросите своего помощника про любую свою идею: «Оцени». Прочитайте ответ.
Теперь откройте новый чат и опишите ту же идею как чужую: «Мой конкурент собирается сделать вот это. Что скажешь?»
Прочитали оба ответа?
Идея не изменилась. Модель не изменилась. Изменилось одно слово — «мой» на «конкурент». А ответы разные, иногда до противоположности.
Что произошло?
Ничего мистического. Слово «мой» — это не информация об идее. Это инструкция по тону. Вы сообщили собеседнику, как относитесь к тексту, — и он вежливо подстроился. Так делает любой парикмахер, которого вы спрашиваете, идёт ли вам стрижка, которую он только что сделал. Он не врёт. Он отвечает на рамку, а не на вопрос.
С людьми мы это знаем и делаем поправку. С моделью — почему-то нет.
Мой сосед Лао Ван — вы знакомы, если читали первую книгу — пришёл ко мне ровно с этим. «Я спросил, хороша ли моя новая вывеска. Он сказал — отличная. Жена сказала — ужасная. Кому верить?»
Хороший вопрос. Только неправильно поставленный.
Правильный звучит так: почему мы вообще спрашиваем одного?
В жизни вы так не делаете. Перед крупной покупкой вы читаете отзывы — много, разных, злых и восторженных. Перед запуском продукта компании собирают фокус-группы. Перед решением суда выслушивают обе стороны. Мы тысячелетиями знаем: один голос — одна слепая зона, и форма этой зоны подозрительно совпадает с формой вашего собственного желания услышать «да».
А теперь смотрите, что изменилось.
Раньше «спросить многих» стоило дорого. Я прошлой весной звонил в агентство насчёт настоящей фокус-группы: три недели на набор, бюджет как за отпуск, на выходе — двенадцать человек по объявлению.
Сегодня у вас под рукой инструмент, который прочитал больше споров, возражений и покупательских сомнений, чем все агентства города вместе. И его можно попросить не отвечать одним голосом — а сыграть шестьдесят разных.
Я попробовал. За вечер: шестьдесят персонажей с именами, биографиями и скрытыми мотивами, двести с лишним диалогов «за» и «против» двух версий продукта. Утром на столе лежала карта возражений — и главное из них ни я, ни команда не видели в упор. Через месяц пятеро живых клиентов повторили его слово в слово.
И заметьте, что для этого понадобилось: ни одной новой кнопки. Разница между «спросил и закрыл» и тем, что будет в этой книге, — не в доступе. Она в вопросах.
Заметьте и порядок слов в предпредыдущем абзаце. Живые клиенты — повторили. Не заменили, не отменили. Синтетическая — значит сыгранная: толпа из голосов модели, а не из живых людей; слово техническое, но другого точного нет, привыкнем вместе. Так вот, синтетическая толпа не измеряет реальность — она репетирует встречу с ней. Кто путает репетицию с измерением, получает очень уверенный самообман со статистикой в приложении. Про эту разницу в книге отдельная глава, самая важная.
А Лао Ван свою вывеску проверил панелью — так исследователи зовут собранную группу голосов, и дальше это слово будет встречаться часто — из сорока сыгранных прохожих. Счёт «жена права» — двадцать девять против одиннадцати.
Вывеску перекрасили.
Теперь — о чём эта книга и чем она отличается от первой.
Первая заканчивалась там, где вы научились работать с одним собеседником: сессии, материал на стол, роли, агенты. Дно того колодца — десять привычек. Оно на месте.
Но за первым колодцем открылся второй. Проверьте себя — что из этого вы уже делаете:
1. Спрашиваете не одного советчика, а панель голосов с разными интересами — и следите, чтобы это не были шестьдесят копий одного подхалима.
2. Важные версии прогоняете через организованный спор «за» и «против», а не через «ну как тебе?».
3. Отделяете «что сказала толпа» от «что это значит»: сводите услышанное в короткий вывод с цифрами — на одну страницу.
4. Знаете, чего синтетические мнения не знают, и проверяете главное на живых людях.
5. Туманные решения раскладываете в сценарии с вероятностями, а не гадаете «получится — нет».
6. У важных решений есть журнал: что решил, чего ждал, когда проверю.
7. База знаний живёт вне головы: карточки с источниками и датами.
8. Лучшие формулировки собраны в библиотеку и имеют версии.
9. Система учится на ваших правках — вы сравниваете свой финал с её черновиком.
10. Раз в неделю система сама докладывает, что в ней пора улучшить.
Сколько набралось?
У меня год назад было два. У Лао Вана — ноль. Правда, у него есть жена с правом голоса, а это, как выяснится, почти пункт четыре.
Устроено всё, как вы привыкли: короткие главы, в каждой — история, приём, пять минут практики. Пять частей: толпа, компас для тумана, память, обучение, эволюция. Между частями — мастерские: техника безопасности для больших объёмов.
И последнее, про сам список.
Перечитайте его ещё раз. Заметили, чего в нём нет? Ни одной новой кнопки. Ни одного нового тарифа. Всё это делается тем же инструментом, которым вы вчера просили рецепт пасты. Разница между «спросил и закрыл» и «системой, которая учится» — не в доступе. Она в вопросах, которые вы задаёте.
Этому списку вопросов и посвящена книга. Первый шаг — в конце первой же главы, и он занимает пять минут.
Как читать эту книгу
Сразу ответ на главный вопрос: да, эту книгу можно читать, не открывая первую. Всё нужное объясняется на месте, а десять привычек первой книги упоминаются так, что понятны и без неё.
Дальше — короткая инструкция и три разрешения.
Разрешение первое: не читать подряд. Части независимы: толпа, компас, память, обучение, эволюция. Начинайте с той, где у вас болит. Заблудиться негде — главы ссылаются друг на друга по именам, и всё нужное всегда в двух страницах от вас.
Разрешение второе: перешагивать необязательное. Между частями стоят семь мастерских — плотные главы-конвейеры; у каждой в первых строках написано, когда она понадобится. Внутри частей встречаются врезки и серии сквозного кейса — это бонусы, а не ступени: перешагнули — ничего не сломали. Не понадобилось — перешагните, оно дождётся.
Разрешение третье: копировать. Все строки, выделенные отступом и чертой слева, — готовые формулировки. Их не нужно понимать до винтика: скопируйте в разговор с помощником как есть, подставьте своё в квадратных скобках — и смотрите, что получится. Понимание придёт из результата быстрее, чем из чтения.
И три маршрута, если хочется плана.
За один вечер: главы 1, 2, 3, 10, 13, 18 и 42. Это скелет книги — консилиум, панель, спор, границы метода, проценты, растяжки и финал. Остальное нарастёт по мере надобности.
Для работы: части 1 и 2 целиком плюс глава 38 — панели до совещаний, решения в тумане, командные правила.
Для своего дела и всего личного: главы 5, 8, 11, 12, 16, 18, 24 — чужой флаг, словарь клиента, сценарии вместо тревоги, дешёвые проверки идей, растяжки и память, которая спорит с вами.
Одно предупреждение вместо напутствия: эта книга не читается — она делается. Пять минут практики в конце главы стоят больше самой главы. Проверите на первой же.
Часть 1. Толпа по запросу
Одна мысль на всю часть: мнение одного собеседника стоит дёшево. Спор правильно собранной толпы — дорого. Толпу теперь собирают за вечер. Дальше — как: кастинг, дебаты, роли, синтез. И честные границы: где толпа гений, а где — хор самообмана.
Глава 1. Один советчик — одна слепая зона
Вы уже провели эксперимент из введения — «моя идея» против «идеи конкурента». Если нет, вернитесь, он обязательный. Это входной билет в часть первую.
Провели? Тогда у вас должен был возникнуть вопрос.
Хорошо, рамку «мой» мы разоблачили. Но ведь можно просто попросить критику! «Разбери слабые места, честно, без комплиментов». Работает же?
Работает. Я сам учил этому в первой книге. А теперь смотрите, где у честной критики потолок.
Попросите юриста раскритиковать ваш договор — он найдёт юридические дыры. Попросите маркетолога — он найдёт маркетинговые. Каждый критикует с той позиции, на которую вы его поставили. А знаете, откуда приходят настоящие провалы?
С позиции, которую никто не занял.
Юрист не заметит, что продукт неудобно держать в руке. Маркетолог не увидит, что бухгалтерия клиента не сможет провести оплату. Самая честная критика с одной позиции — это прожектор: ярко освещает один сектор и делает темноту вокруг ещё темнее. Вам кажется, что вы проверили идею. Вы проверили сектор.
Как это решается в жизни? Столом, за которым сидят разные люди. Финансист морщится от сметы, продажник — от сроков, и в трении их интересов рождается объём. Проблема в том, что такой стол — роскошь. У Лао Вана в мастерской нет совета директоров. У меня есть — но не по каждому чиху.
Приём: соберите стол из воздуха. Минимальный размер — тройка:
Ситуация: [опишите]. Собери консилиум из трёх участников с конфликтующими интересами: [например: дотошный финансист, циничный клиент, опытный конкурент]. Каждый высказывается со своей позиции, конкретно, с цифрами. Потом — спор об одном самом остром пункте. В конце: не общий вывод, а список разногласий — в чём они так и не сошлись.
Обратите внимание на последнюю строчку. Она важнее всего, и вот почему.
Что делает модель, если попросить «общий вывод»? Правильно: сглаживает. Услужливо сшивает три позиции в одну гладкую, со всеми согласную — и вся ценность стола испаряется, вы снова слушаете один голос, просто трёхслойный. А ценность — в углах. Список разногласий — это карта мест, где думать придётся вам. Никакой консилиум не освобождает от этой работы; он показывает, где она.
И проверка качества, простая как лакмус: если раздел разногласий пуст — вы собрали не трёх людей, а три копии. Меняйте роли на конфликтующие: тот, кто платит; тот, кто пользуется; тот, кто конкурирует. Мир держится на том, что у этих троих не совпадают интересы. Пусть не совпадают и за вашим столом.
Пять минут практики. Возьмите решение, которое висит сейчас, и прогоните через тройку. Читайте только раздел разногласий. Одно из них кольнёт — вот с ним и работайте.
Одной строкой: Один голос — один прожектор; собирайте тройку с конфликтом интересов и читайте раздел разногласий.
Глава 2. Как собрать шестьдесят человек, не выходя из-за стола
Видели когда-нибудь опрос у входа в фитнес-клуб — «Считаете ли вы спорт полезным?»
Сто процентов «да». Ошеломительно.
Что не так с этим опросом, вы видите сразу: у входа в фитнес-клуб стоят люди, которые уже купили абонемент. Опросили не сто человек — один ответ сто раз.
Запомните это ощущение. Сейчас вы сделаете ту же ошибку, только своими руками.
Мой первый заказ панели звучал так: «Создай фокус-группу из 60 человек и обсуди мой продукт». Получил шестьдесят имён — и шестьдесят вариаций одного осторожно-одобрительного мнения. Хор. Толпа у входа в мой личный фитнес-клуб.
Почему так вышло? Разберём механизм, он поучительный.
Я сказал «60 человек» — но не сказал, чем они отличаются. А без инструкции на различие модель делает то, что делает всегда: тянется к самому вероятному. Самый вероятный участник обсуждения вашего продукта — вежливо-заинтересованный. Умножьте его на шестьдесят — получите то, что получил я. Не обман. Среднее.
Настоящие агентства не зря тратят половину бюджета фокус-группы на рекрутинг: состав решает больше, чем вопросы. Значит, и нам нужен рекрутинг. Три шага.
Шаг первый: скринер наоборот. В агентстве скринером отбирают людей. Вы им — генерируете:
Собери панель из 60 персонажей для обсуждения [тема]. Квоты: 40% активно пользуются [категорией], 30% пробовали и бросили, 30% скептики. Возраст от 20 до 65, доход от «считает каждую копейку» до «не смотрит на ценник», 10% — профессионалы рынка. У каждого: имя, возраст, занятие, две строки биографии, отношение к теме одной фразой — и скрытый мотив: то, чего он вслух не скажет, но что управляет ответами.
Про скрытый мотив — отдельно, это главная специя. Сравните.
«Марина, 34, бухгалтер, скептик» — предсказуема, как гороскоп.
«Марина, 34, бухгалтер, скептик; скрытый мотив: однажды купилась на курсы и до сих пор стыдно» — уже человек.
Почему работает? Потому что вы выдали персонажу противоречие: снаружи одно, внутри другое. А противоречие — это и есть то, что отличает человека от функции. Модель прекрасно умеет играть противоречия. Ей просто нужно разрешение.
Шаг второй: запрет на клонов, прямым текстом:
Дубли запрещены: не больше двух похожих позиций. Минимум 15 человек настроены к теме заведомо недружелюбно. Разброс мнений важнее моего комфорта.
Последние четыре слова перечитайте. Вы их пишете не модели. Себе.
Шаг третий: приёмка. Все шестьдесят биографий читать не надо — надо принять работу, как принимали бы у рекрутёра: «Покажи таблицей: имя, сегмент, отношение, скрытый мотив. Посчитай скептиков». Скептиков меньше заказанного? Вернуть на доработку. Панель — документ: сохраните файлом, она переиспользуется, как настоящая клиентская база.
И про магию числа шестьдесят. Её нет. Шестьдесят — это просто «достаточно, чтобы возражения начали повторяться, и достаточно мало, чтобы вы дочитали синтез». Вывеске хватит сорока прохожих. Сложному продукту я собирал сто двадцать — но читал уже не реплики, а сводку повторов.
И панель — не обязательно про бизнес. Сорок «прохожих» Лао Вана судили вывеску; моя жена позже соберёт двадцать «мам с района» под идею семейного праздника — об этом в главе про людей. Кастинг везде один.
Пять минут практики. Соберите первую панель на реальную тему — двадцать персонажей для скорости. Примите по таблице. Найдите двух самых неудобных для вас — и запомните имена. Скоро они станут вашими любимыми сотрудниками.
Одной строкой: Панель делает не число, а кастинг: квоты, скептики, скрытые мотивы — и приёмка таблицей.
Глава 3. Двести диалогов за и против
Вспомните последнее совещание, где говорили все сразу. Или родительский чат в день сбора денег.
Много голосов — много ли смысла?
Вот и с панелью так же. Наивный ход — «пусть все шестьдесят обсудят продукт» — даёт кашу на три экрана: к двадцатому голосу модель забывает, кто есть кто, а вы засыпаете на пятнадцатом. И это не дефект модели. Это физика: шестьдесят человек не разговаривают одновременно нигде — ни в комнате, ни в чате, ни в её «голове».
Как разговаривают? Раундами. Любой турнир, любой суд, любое приличное совещание — это серия маленьких разговоров с правилами. Значит, и нам нужен турнир.
Раунд — это одна тема и одна выборка. Десять-двенадцать персонажей, один вопрос:
Раунд 1. Возьми из панели [имена или «всех скептиков»]. Покажи им версию А: [описание или файл]. Каждый реагирует в своём характере, 2–4 реплики, живым языком — с перебиваниями и «не знаю». Запрещён вежливый консенсус: каждый называет одну причину не покупать, даже если в целом за.
Заметили последнее требование? Разберём, зачем оно.
Без него добрая половина участников отделается словом «согласен». Почему? Потому что «согласен» — самый вероятный ответ вежливого человека в группе, а модель тянется к вероятному, мы это уже проходили. Обязательная «одна причина против» ломает вероятность принудительно. Вы не просите честности — вы делаете её условием игры. Почувствуйте разницу: честность по просьбе выдыхается через три реплики, честность по правилам держится всю партию.
Дальше — столкновение:
Раунд 5. Возьми трёх убеждённых сторонников версии А и трёх — версии Б. Пусть спорят, три круга. В конце каждый говорит: изменил ли позицию и что именно его сдвинуло.
«Что именно сдвинуло» — читайте эти ответы с карандашом. Аргумент, который двигает позицию даже в игрушечном споре, — первый кандидат в ваши настоящие тексты и переговоры. Вы искали убедительные слова? Вот их месторождение.
Теперь про заголовок. Двести диалогов — это сколько запросов?
Не один. Пятнадцать-двадцать раундов, у каждого — свой вопрос. Мой типовой план на продукт: раунды 1–4 — реакции сегментов на версии; 5–6 — очные дебаты; 7–9 — цена, три уровня на одной выборке; 10–12 — «назови момент, когда ты закрыл бы страницу»; 13–15 — какими словами участники пересказывают продукт знакомым. Последние раунды — отдельное золото: их словарь — готовые заголовки, но об этом своя глава.
И два технических правила, без которых кампания разваливается. Правило первое: каждый раунд — новая сессия, в которую вы кладёте файл панели и абзац контекста. Длинный чат плывёт — вы знаете из первой книги; с толпой он плывёт вдесятеро быстрее, и первый симптом вы уже видели у меня: скептик заговорит голосом энтузиаста. Правило второе: транскрипт — то есть просто запись разговора — каждого раунда сохраняется файлом с номером: «раунд-07-цена-скептики». Зачем? Эта папка скоро понадобится дважды: для синтеза и для базы знаний. Кампания без транскриптов — как исследование без записей: было интересно, ничего не осталось.
Пять минут практики. Один раунд на вчерашней панели: одна тема, десять персонажей, обязательная «причина против» с каждого. Транскрипт — файлом. Какое возражение кольнуло? Не спорьте с ним. Запишите.
Одной строкой: Толпой управляют раундами: одна тема, десять голосов, обязательная «причина против» — и запись каждого раунда в файл.
Глава 4. Модератор, адвокат дьявола и молчун
В настоящих фокус-группах есть железный закон: громче всех говорит не тот, кто прав. Тот, кто громкий.
Вы это видели тысячу раз. На совещании солирует самый уверенный, а самый знающий молчит в углу. В компании друзей ресторан выбирает не тот, кто разбирается в еде, а тот, кто быстрее всех сказал «идём в тот».
Хотите неприятную новость? Синтетическая группа наследует эту болезнь — в комичной форме. Модель выбирает двух-трёх «ярких» персонажей и начинает писать пьесу про них. Остальные превращаются в массовку с репликой «согласен».
Почему? Механизм тот же, что всегда: драматургия вероятнее протокола. В текстах, на которых училась модель, разговоры устроены как сцены — с главными героями и статистами. Попросили разговор — получили сцену.
Лекарство человечество придумало давно: людей, которые сидят в комнате не ради мнения, а ради порядка.
Первый — модератор. Не «поведи обсуждение» — это пожелание. Устав:
Ты модератор. Правила: никто не говорит дважды подряд; после каждого мнения ты спрашиваешь «почему» или «приведи случай из твоей жизни»; каждые три реплики — слово тому, кто ещё молчал, по имени; резюмировать до конца раунда запрещено.
Про «случай из твоей жизни» — остановимся. Сравните два ответа.
«Мне кажется, дорого». Что с этим делать? Ничего. Это настроение.
«Я в прошлом месяце выбирал похожее и ушёл, увидев оплату только годом вперёд». А вот это — сценарий. Его можно проверить, под него можно переделать тариф. Вопрос «почему» превращает настроение в довод; вопрос «вспомни случай» превращает довод в факт. Два слова в уставе — и качество всего раунда другое.
Второй человек порядка — адвокат дьявола:
Добавь Виктора: его работа — искать причины провала. Вежлив, конкретен, не троллит. После каждого блока называет самое слабое место прозвучавшего — и предлагает, как проверить, что оно правда слабое.
Почему адвокат на ставке работает лучше, чем просьба «покритикуйте»? Подумайте секунду.
У него другая должность. Всем остальным за столом выгодно быть приятными — такова их роль. Виктору платят за найденные дыры: не найдёт — не справился с работой. Вы не изменили модель. Вы изменили, за что персонажу «платят». Запомните этот ход — в конце книги он развернётся в целую дисциплину. И одна честная сноска для живых команд: с настоящими людьми назначенный «адвокат дьявола» работает хуже подлинного несогласного — группа чувствует игру и мнений не меняет. К панели это, похоже, относится меньше: в ней назначены все, и роль меняет не чувства группы, а само задание исполнителю. Но скажу честно: перенос этого вывода на сыгранные группы — пока опыт практиков, а не проверенный факт. И своя болезнь у сыгранных спорщиков есть — они соглашаются друг с другом охотнее живых, стягиваясь к общему мнению за пару раундов. Потому устав, независимые первые реплики и защита несогласного в синтетической комнате — не украшение, а несущая конструкция.
И третье, главный сдвиг главы: войдите в комнату сами.
Я вхожу в группу как участник. Не поддавайся мне: моё слабое мнение разбирайте так же, как чужое.
Первый раз, когда пенсионерка Тамара Павловна разнесла мой «интуитивно понятный интерфейс» вопросом «а кнопку где искать, если я её не вижу?» — я обиделся. Честно. Потом переписал первые экраны продукта. Обида прошла, экраны остались.
Остался один нерешённый персонаж — молчун. Тот, кто за весь раунд сказал «ну, наверное». Для него — приём, подсмотренный у живого модератора: в конце раунда — анонимные записки: «Пусть каждый, кто говорил мало, напишет одну фразу, которую не решился сказать вслух».
Почему записки вытаскивают то, чего не вытащил разговор? Потому что в группе у слов есть цена — как ты будешь выглядеть. Анонимность обнуляет цену. Модель честно воспроизводит и цену, и её обнуление — и в «записках» регулярно лежит самый полезный текст раунда.
Пять минут практики. Перезапустите вчерашний раунд: устав, Виктор, вы внутри со своим настоящим мнением. Досидите до записок.
Одной строкой: Назначьте порядок: устав модератору, ставка адвокату дьявола, анонимные записки молчунам — и войдите в комнату сами.
Глава 5. Панель под чужим флагом
Спросите друга: «Как тебе квартира, которую я решил купить?»
А теперь представьте, что спросили иначе: «Риелтор впаривает мне вот эту квартиру. Глянь?»
Один и тот же друг. Одна и та же квартира. Сильно разные ответы — и вы это знаете заранее, правда?
Слово «решил» сообщило другу не факт о квартире. Оно сообщило, что критика теперь стоит дорого — она про вас, а не про квартиру. Друг не врёт. Он экономит на дорогом.