Содержание

Каждое мнение важно

Создайте опрос и превратите обратную связь в источник роста

Создать сейчас
Лого WebAsk

Открытый вопрос (Open-ended Question)

Открытый вопрос это вопрос без готовых вариантов: респондент пишет ответ своими словами. Он хорошо находит то, о чём вы не догадались спросить, и плохо измеряет, насколько это распространено.

Что такое открытый вопрос

Технически это текстовое поле вместо списка. Методически это отказ от собственных гипотез в пользу словаря респондента: вы не предлагаете формулировок, а собираете их.

Отсюда и область применения. Открытый вопрос нужен там, где список составить нельзя или преждевременно: на разведочной стадии, при разборе жалоб, при поиске причин за уже поставленной оценкой.

Три роли одного элемента

Поле для текста ставят в трёх разных ситуациях, и путать их не стоит: от роли зависит, что вы потом сможете сделать с ответами.

WebAsk · сервис опросов Так выглядит вопрос NPS · это демо

Насколько вероятно, что вы порекомендуете нас коллеге?

Вот и всё — такой опрос собирается за пару минут, а индекс WebAsk считает сам.

Создать свой опрос

Три роли текстового поля в анкете: самостоятельный вопрос, вариант другое и уточнение после выбора

Самостоятельный вопрос. Список невозможен или вы его сознательно не даёте. Задача поля собрать темы и формулировки.

Вариант «другое» с полем. Страховка к закрытому вопросу. Задача не собрать мнения, а показать, чего в списке не хватает. Если в «другое» попадает заметная доля ответов, список пора дополнять.

Уточнение после выбора. Человек поставил оценку, а поле спрашивает почему именно такую. Здесь у ответа уже есть числовой контекст, и это самый удобный для анализа случай: текст объясняет цифру.

Почему частоты в открытых ответах это не распространённость

Это главное, что стоит знать про открытые вопросы, и это же чаще всего игнорируют, когда считают, сколько людей «упомянули» ту или иную тему.

Сравнение открытой и закрытой версии одного вопроса: в открытой человек называет первое, что пришло в голову, в закрытой отмечает и неочевидное

Шуман и Прессер разбирали это в классической работе об экспериментах с формой вопроса. В опыте с вопросом о главной проблеме страны открытая версия дала заметно меньше ответов про преступность, чем закрытая, где такой вариант стоял в списке. Люди попросту не называли сами то, что охотно отмечали, увидев в перечне.

Обобщение важнее самого примера. Респонденты почти не предлагают вариантов, которых нет в списке, даже когда список не отражает их собственных приоритетов. А если из закрытого списка выпал вариант, который многие назвали бы сами, у двух версий вопроса может различаться даже порядок вариантов по частоте.

Практический вывод: доля упоминаний в открытых ответах измеряет не распространённость проблемы, а её заметность в момент ответа. Чтобы получить распространённость, найденные темы надо вынести в закрытый вопрос и задать его заново.

Что выбрать под задачу

Спор «открытый или закрытый» решается не вкусом, а тем, что вы собираетесь получить на выходе.

ЗадачаЧто братьПочему
Узнать, какие темы вообще существуютоткрытыйсписок ещё не составить, нужны слова людей
Измерить, у какой доли есть проблемазакрытыйоткрытый недооценит всё неочевидное
Понять причину поставленной оценкиоткрытый после закрытоготекст объясняет цифру, которая уже есть
Сравнить два замера между собойзакрытыйформулировки фиксированы, динамика читается
Проверить полноту своего списка«другое» с полемвидно, чего в списке не хватает

Нормальный порядок работы поэтому такой: открытый вопрос на разведке, потом закрытый для измерения, а открытое уточнение остаётся при оценках навсегда.

Формулировка решает больше, чем кажется

У открытого вопроса нет вариантов, которые подсказали бы, чего от человека хотят, поэтому вся нагрузка ложится на формулировку.

Широкий вопрос вроде «что улучшить в сервисе» даёт вежливые общие слова: «всё нравится», «сделайте дешевле». Узкий вопрос про конкретный эпизод, например «что было неудобно при оформлении заказа», даёт разбираемые ответы, потому что человек вспоминает событие, а не оценивает вас целиком.

Полезно и ограничить рамку по времени. «Что не получилось в последний раз» работает лучше, чем «что обычно не получается»: у первого есть конкретный случай, у второго только обобщение.

Пустые ответы говорят о вопросе

Доля пустых и односложных ответов это тоже данные, только не о респондентах, а о вашей формулировке. Если поле пропускает большинство, вопрос либо слишком широкий, либо стоит не в том месте анкеты.

Отличать при этом стоит два разных случая. Пустой ответ означает «не захотел или не смог», а короткий ответ вроде «всё нормально» это содержательное «мне нечего добавить». В сводке их лучше не смешивать: доля первых говорит о качестве анкеты, доля вторых о самом продукте.

Размер поля меняет ответы

Открытый вопрос не нейтрален к оформлению, и это измерено.

Смит с соавторами проверяли в веб-опросах, что даёт увеличение поля для ответа. Размер поля положительно связан с длиной и детальностью написанного: в большом поле люди пишут больше. Но у находки есть тонкость, которая объясняет противоречивый опыт практиков: на тех, кто отвечает рано, размер поля влияет мало, а вот качество ответов у поздних респондентов он улучшает заметно.

Отсюда простое правило: если вам нужен развёрнутый ответ, ставьте большое поле. Одна строка это сигнал «напишите пару слов», и респондент его считывает.

Чем платят за свободную форму

Издержки открытого вопроса ложатся на три вещи, и все три надо считать заранее.

  • пропуски: открытый вопрос легко пролистать, и часть ответов будет пустой или в одно слово
  • время: печатать дольше, чем отмечать, и это удлиняет анкету сильнее, чем кажется по числу вопросов
  • разбор: ответы надо привести к категориям, и без этого шага у вас не данные, а список реплик
  • много открытых вопросов подряд: к третьему подряд полю содержательные ответы почти заканчиваются
  • открытый вопрос вместо закрытого там, где список известен: вы получите те же варианты, но дороже и с потерями

Про место в анкете есть простое правило. Открытый вопрос лучше ставить после того, как человек уже вложился в заполнение, но не в самый конец, где его пролистывают вместе с прощанием. Оценка плюс уточнение сразу за ней работает лучше всего: контекст свежий, и отвечать легко.

Как это сделано в WebAsk

Открытый вопрос собирается типом «Поле ввода». Настраиваются лимит символов, формат «Большое поле» для длинного ответа и обязательность.

Два замечания по настройкам, если помнить про исследование выше. Формат «Большое поле» это ровно тот рычаг размера, который влияет на длину ответа, так что для развёрнутых ответов его стоит включать. А лимит символов задаёте вы сами: системного ограничения длины нет, и слишком маленький лимит обрежет как раз тех, кто готов был написать подробно.

Обязательность у открытого вопроса лучше не включать без нужды. Человек, которому нечего написать, либо уйдёт, либо поставит точку, и в данных появится мусор, который потом придётся отделять от настоящих коротких ответов.

Что делать с ответами

Сырые открытые ответы это ещё не результат. Чтобы из них получились цифры, ответы приводят к общим категориям, то есть качественно анализируют и кодируют, и вот тут появляются свои правила: единый кодбук, проверка согласованности между кодировщиками и слепая перепроверка на части массива.

Это отдельная тема, и в глоссарии она разобрана в карточке про кодирование данных. Рабочий процесс с разбором ответов через ИИ, включая сборку кодбука и проверку результата, разложен по шагам в статье блога.

Разбор открытых ответов с помощью ИИ Кодирование данных (Data Coding)

Коротко

  • Открытый вопрос собирает формулировки респондентов, а не измеряет доли.
  • Частота упоминаний это заметность темы, а не её распространённость. Для распространённости темы выносят в закрытый вопрос.
  • Люди почти не называют сами то, чего нет в списке, поэтому открытая и закрытая версии одного вопроса дают разные распределения.
  • Размер поля влияет на длину ответа, сильнее всего у тех, кто отвечает поздно.
  • Роль поля надо выбрать заранее: самостоятельный вопрос, «другое» или уточнение после оценки.
  • Открытые ответы становятся данными только после кодирования.

Вопросы и ответы

Можно ли по открытым ответам считать проценты?

Считать можно, читать как распространённость нельзя. Доля упоминаний показывает, насколько тема заметна человеку в момент ответа. Люди не называют сами то, чего нет перед глазами, поэтому для оценки распространённости найденные темы выносят в закрытый вопрос и спрашивают снова.

Сколько открытых вопросов ставить в анкету?

Ориентир простой: один осмысленный лучше трёх подряд. К третьему полю содержательные ответы обычно заканчиваются, остаются прочерки и односложные реплики. Если открытых тем несколько, лучше развести их по разным местам анкеты.

Делать открытый вопрос обязательным?

Обычно нет. Обязательность добавляет в данные мусор от тех, кому нечего сказать, и увеличивает риск, что человек закроет анкету. Исключение это уточнение после низкой оценки, где сам вопрос уместен и ожидаем.

Большое поле или одна строка?

Если нужен развёрнутый ответ, большое поле: его размер положительно связан с длиной написанного. Одну строку люди читают как просьбу ответить парой слов. И следите за лимитом символов, чтобы он не обрезал тех, кто готов писать подробно.

Чем открытый вопрос отличается от варианта «другое»?

Задачей. Самостоятельный открытый вопрос собирает темы и формулировки, а поле при варианте «другое» проверяет полноту вашего списка. Если в «другое» попадает заметная доля ответов, значит список неполон и его надо дополнить.

2

Каждое мнение важно

Создайте опрос и превратите обратную связь в источник роста

Создать сейчас