Метод ранжирования: чем он отличается от оценки и чекбоксов
Спросите «что для вас важно при выборе сервиса?» чекбоксами, и половина людей отметит всё. Спросите то же шкалой от 1 до 5, и цена, скорость и поддержка получат по 4,6. Формально ответы есть, а решить по ним, чем заняться первым, нельзя.
Ранжирование снимает эту проблему одним ограничением: два варианта не могут стоять на одном месте. Человек вынужден сравнить их между собой и признать, что поддержка ему всё-таки важнее скорости. Цена за это: вопрос отвечается дольше, а расстояние между местами неизвестно. Первое и второе место могут быть почти равны, а могут отличаться в разы, порядок этого не скажет.
| Тип вопроса | Что получаете | Слабое место |
|---|---|---|
| Несколько из списка | Набор отмеченного | Нет приоритета, отмечают почти всё |
| Шкала для каждого пункта | Оценку каждого отдельно | Всё получает высокие баллы |
| Ранжирование | Порядок без равных мест | Не видно, насколько первое важнее второго |
| Распределение 100 баллов | Порядок и вес | Дольше отвечать, нужна арифметика |
Когда вопрос на ранжирование работает
- Приоритизация доработок: пять фич в бэклоге, ресурса хватит на две.
- Ценности и мотивация сотрудников: деньги, график, команда, рост, смысл работы.
- Критерии выбора поставщика или продукта перед тем, как писать оффер.
- Порядок тем для курса или мероприятия, когда времени на все не хватит.
Общее у этих задач одно: после опроса вы делаете выбор, и вам нужен порядок, а не подтверждение, что всё хорошо.
Когда ранжирование не подходит
Если вариантов больше девяти, середину списка люди расставляют заметно небрежнее, чем верх и низ. Для длинного списка лучше метод парных сравнений: там человек каждый раз решает только про два варианта.
Если важно, насколько один вариант важнее другого, порядка мало. Берите распределение 100 баллов. И не ранжируйте то, о чём человек не имеет мнения: заставить его выбрать порядок можно, но это будет шум, а не приоритет.
Примеры вопросов на ранжирование
- «Расставьте по важности, что вы учитываете при выборе службы доставки: цена, срок, отслеживание, аккуратность курьера».
- «Какие доработки нам сделать в первую очередь? Перетащите самое нужное наверх».
- «Что для вас важнее всего в работе? Расставьте от первого до последнего места».
- «В каком порядке вы бы хотели разобрать темы на воркшопе?»
- «Расставьте каналы, через которые вам удобнее всего получать ответ от поддержки».
В формулировке прямо говорите, где верх: «самое важное наверх» снимает вопрос, куда тащить главный вариант.
Как обработать результаты ранжирования: средний ранг и доля первых мест
Основная метрика это средний ранг: сумма мест, которые вариант получил, делённая на число ответивших. Чем он меньше, тем выше приоритет. Сумма рангов (rank sum) даёт тот же порядок, её удобно считать, когда у всех одинаковое число ответов.
Средний ранг = сумма мест варианта / число ответивших
Доля первых мест = ответы, где вариант на 1-м месте / число ответивших × 100%| Вариант | Места у четырёх человек | Средний ранг | Первые места |
|---|---|---|---|
| Цена | 1, 2, 1, 2 | 1,5 | 50% |
| Скорость | 2, 1, 3, 3 | 2,25 | 25% |
| Поддержка | 3, 3, 2, 1 | 2,25 | 25% |
Пример показывает, зачем смотреть не только на среднее. У скорости и поддержки средний ранг одинаковый, но распределения разные: скорость у двоих на последнем месте, у поддержки разброс шире. Когда средние совпадают, откройте распределение мест по каждому варианту, а при большой выборке разрежьте ответы по сегментам.
Частые ошибки в вопросах на ранжирование
- Смешивать в одном списке вещи разного масштаба: «цена» и «цвет кнопки оплаты» не ранжируются вместе.
- Давать 12-15 пунктов. Хвост списка получается случайным, а человек устаёт на первом же вопросе.
- Ставить первым тот вариант, который хотите «проверить». Стартовый порядок подсказывает ответ тем, кто не стал ничего двигать.
- Считать разницу между 1-м и 2-м местом такой же, как между 4-м и 5-м. Ранг это порядок, а не расстояние.
Как собрать вопрос на ранжирование в аскио
Добавьте блок «Ранжирование» из палитры: он появится с заголовком «Расставьте по приоритету» и четырьмя вариантами (скорость, качество, цена, поддержка). Меняете текст, дописываете свои пункты или вставляете их списком через «вставить списком». Минимум два варианта.
Респондент тянет пункты за ручку, рядом с каждым горит номер места. Работает и сортировка с клавиатуры. Ответ считается данным после первого перетаскивания: в этот момент сохраняется весь порядок целиком. Если человек согласен со стартовым порядком, ему всё равно нужно сдвинуть хотя бы один пункт, поэтому стоит написать об этом в пояснении под вопросом.
Перемешивания вариантов в блоке нет, стартовый порядок у всех одинаковый. В аналитике для каждого варианта виден средний ранг (меньше значит важнее), число первых мест и список пунктов, которые кто-то оставил без места. В CSV-выгрузке ответ приходит строкой вида «1. Цена; 2. Скорость; 3. Поддержка».
Что настраивается
- список вариантов