Позиция в списке

На вопрос «какие интернет-магазины парфюмерии надёжны» нейросеть чаще всего выдаёт нумерованный список из 5–10 названий. Бренд в нём есть, но на каком месте? Позиция в списке: порядковый номер бренда в перечне из ответа. LLMetr фиксирует её отдельно от факта упоминания.

Зачем смотреть на место

Упоминание в конце длинного списка и упоминание в первой строке дают бренду разный эффект. Читатель, как правило, до конца перечня не доходит, а нейросеть нередко сама отмечает лучший вариант в начале. Строгих данных о том, как позиция в ответе влияет на переходы или покупки, нам неизвестно. Есть исследования по классической выдаче, но переносить их цифры на ответы ChatGPT или Perplexity нельзя: интерфейс другой. Поэтому позицию используют как индикатор тенденции, а вес места выбирают сами.

Кроме того, позиция показывает, кто вас опережает. Если бренд в ответе есть, но регулярно стоит позже двух-трёх конкурентов, это отдельная задача, не похожая на «попасть в ответ».

Как её определяют

В ответе ищется перечень (нумерация, маркеры, строки с жирным названием) и в нём название бренда или одно из его написаний. Позиция равна номеру пункта. Есть тонкости. Если бренд упомянут в тексте, но не в списке, позиции нет. Если в одном пункте несколько брендов («Бренд А и Бренд Б»), позиция у них общая. Если в ответе два списка (скажем, «магазины» и «маркетплейсы»), надо решить, какой основной. И порядок в списке не всегда означает рейтинг: многие модели прямо пишут, что он условный.

Условный пример. В 20 ответах на промпт «где купить электросамокат» бренд встретился в списке 12 раз: 3 раза на первом месте, 4 на втором-третьем, 5 на четвёртом и ниже. Среднюю позицию по этим 12 ответам считают с оговоркой, ведь 8 ответов, где бренд вне списка или не упомянут, в среднее не входят. Поэтому показывают две цифры: долю ответов с брендом в списке (12 из 20 = 60%) и долю первых трёх мест (7 из 20 = 35%).

Типичные промахи

Усредняют позицию только по ответам, где бренд есть, и не показывают, в скольких его нет. Бренд с позицией 1,5 в одном ответе из десяти выглядит в среднем лучше, чем бренд с позицией 3 в девяти. Принимают порядок за рейтинг, хотя он может быть алфавитным или произвольным. Сравнивают места в списках разной длины: третье из трёх и третье из десяти значат разное. И делают выводы по одному ответу, а разброс меняет порядок от запроса к запросу.

Что делать

Смотрите позицию вместе с долей упоминаний: сначала важно попасть в ответ. Сравнивайте порядок с конкурентами по тем же промптам. Если конкурент систематически выше, изучите, на каких источниках он держится (блок источников в отчёте). Магазинам с широким ассортиментом стоит отдельно смотреть промпты со списком «топ-N»: там позиция важна сильнее всего.