для специалистов

Как читать и проверять индекс нейровидимости

Версия для тех, кто сам занимается поисковым продвижением. Коротко: почему первое слово в любом разговоре о видимости — название поверхности, где в этих расчётах прячется ошибка отбора, и какие выводы из индекса делать нельзя.

полные правила подсчёта · короткое описание

Иллюстрация: работа над технической частью сайта

Какие поисковые системы и режимы измеряем

«Видимость в нейросетях» без указания поверхности — величина без единицы измерения. Наш замер по одному и тому же корпусу запросов на «Обзоре от ИИ» Google и на генеративном блоке Яндекса дал совпадение списков доменов 0,16 по мере Жаккара: пересекается примерно каждый шестой домен.

Иллюстрация того, насколько это меняет выводы. В нашем сентябрьском срезе по теме продвижения в нейросетях dzen.ru попал в источники 5 раз из 19 на яндексовой поверхности и 0 раз из 71 на гугловой. Утверждение «Дзен не цитируется» — это утверждение про Google, и только про него.

Отсюда практическое следствие для отчётов: строка «видимость 23%» без имени поверхности, даты и состава запросов непроверяема, и её нельзя ни подтвердить, ни оспорить.

Активация зависит от типа запроса сильнее, чем от отрасли

ИИ-ответ показывается не всегда. В нашем срезе раздел корпуса, состоящий из покупательских формулировок («заказать», «сколько стоит», «агентство»), дал на яндексовой поверхности 0 блоков из 16 — при 16 из 16 на гугловой по тем же самым запросам.

Это не «нас не называют». Это отсутствие самого ответа как явления. Поэтому каждый запрос в корпусе размечен типом — с городом, покупательский, сравнительный, информационный, — и доля попаданий считается внутри типа, а не по всему корпусу сразу.

Как отбор запросов влияет на выводы

Соблазн выглядит так: отбросить запросы, по которым ИИ-ответа не было, посчитать долю цитирований среди оставшихся и назвать её видимостью. Число получится большим и приятным.

Оно будет неверным. Наблюдаемая величина раскладывается на три независимых сомножителя:

СомножительВопрос, на который отвечает
активацияпоказала ли поверхность ИИ-ответ вообще
попаданиеоказался ли домен в источниках показанного ответа
повторяемостьудержалось ли это при повторных прогонах

Высокая условная доля во втором сомножителе спокойно сосуществует с нулевой практической видимостью, если первый сомножитель мал. В индексе три числа стоят рядом и не сворачиваются в одно.

Отказ инструмента и отсутствие ответа — разные события

Сервисы поисковых данных периодически не отвечают. Если засчитать такой отказ как «источников нет», получится ровно тот вывод, за который платят деньги, и он будет ложным.

У нас три исхода разведены на уровне сырья: блок есть, блока нет, отказ инструмента. Отказ переснимается и в расчёт не идёт, а его доля публикуется отдельной строкой волны. За период первой волны доля отказов на яндексовой ветке доходила до трети замеров в отдельные дни — без учёта этого любая статистика по ней была бы занижена.

Повторы: сколько и зачем

На одном и том же запросе состав источников меняется между прогонами. По нашим собственным замерам совпадение между прогонами лежит в диапазоне 0,36–0,60 по Жаккару. Это свойство генеративной выдачи, а не поломка.

Поэтому единичный прогон — это одна выборка, а не измерение, и в индексе он не публикуется. Каждый запрос задаётся пять раз, прогоны разнесены по дням, и в таблице стоит доля прогонов, а не отметка «засчитано».

Насколько состав источников меняется при перефразировании того же вопроса — отдельная величина, и мы её меряем отдельной серией. До появления этого числа индекс описывает поведение поверхности на фиксированных формулировках, и мы это оговариваем.

Как объединяем адреса одного источника

Домены сводятся к регистрируемому: realty.yandex.ru и ya.ru — это yandex.ru. Поддомены сохраняются в сырье и доступны для разбора. Редиректы и параметры отслеживания снимаются, исходный и конечный адрес остаются в записи замера.

Правило выбрано так, чтобы крупный игрок не распадался на несколько строк и не выглядел слабее, чем он есть. Обратная сторона: блоговый поддомен компании попадает в её же строку. Если вам нужна разбивка — она есть в сырье.

Чем это отличается от чекера внутри платформы

Проверить упоминание сегодня умеет и человек вручную, и функция внутри крупного SEO-сервиса. Разница не в самом факте проверки:

Какие выводы индекс не подтверждает

Воспроизводимость

Вместе с волной публикуются: полный список запросов с частотой, типом и отраслью; построчные записи замеров с датой, поверхностью, номером прогона, исходом и списком источников; доля отказов инструмента; правила подсчёта в редакции на дату волны.

Этого достаточно, чтобы пересчитать любую нашу цифру, найти у нас ошибку и показать её. Данные снимаются через коммерческий API поисковых данных с московской привязкой и десктопной выдачей; поставщика мы не называем, но все полученные от него ответы лежат в открытом сырье.

Нужен такой же разбор не по отрасли, а по конкретному сайту? Бесплатная проверка — три запроса, разбор в течение рабочего дня.