Создать набор
Выбрать вопросы для поиска, сравнения, решения, проверки и бренда.
РУКОВОДСТВО / ПРОТОКОЛ
Мониторинг цитирований ИИ
Измеряйте ответы в определённом контексте, не превращая один снимок экрана в обещание видимости.
Прямой ответ
Как достоверно измерять цитирование ИИ?
Используйте постоянный набор вопросов, дату, точную формулировку ответа и видимые ссылки. Затем сравнивайте точность и изменения.
01 / Метод проверки
Метод проверки
Записать контекст
Сохранить дату, страну, язык, интерфейс, настройки и наличие аккаунта.
Оценить ответ
Разделить упоминание бренда, ссылку, использованный источник и точность.
Сравнить серии
Искать различия между системами и периодами; проверять исходные страницы.
ИЗМЕРЕНИЕ / ИСТОЧНИКИ ВИДИМОСТИ
Показ, цитирование, посещение: три разных наблюдения
Появление в ответе ИИ и посещение сайта относятся к разным этапам. Перед сравнением периодов выберите показатель, отвечающий на ваш вопрос.
- Быть доступным
Обход может сделать страницу доступной для поиска.
- Быть показанным или процитированным
Ссылка может появиться в ответе без перехода по ней.
- Получить посещение
Сайт фиксирует приход в пределах возможностей своей системы измерения.
| Источник наблюдения | Что измеряется | Ограничение вывода |
|---|---|---|
| Google · Генеративный ИИ в Search Console Официальная документация | Показы ссылок в AI Overviews и AI Mode с разбивкой, в частности, по страницам, странам и устройствам. | Дни учитываются по тихоокеанскому времени (PT). Итог по ресурсу может отличаться от суммы строк по страницам из-за агрегации. |
| Bing Webmaster Tools · AI Performance Официальная документация | Видимые цитирования и цитируемые страницы в поддерживаемых ИИ-сервисах; поисковые запросы для grounding объединяются в группы. | Цитирование не означает переход, позицию или важность страницы. Группы запросов не воспроизводят отдельные промпты. |
| Измерение на сайте | Посещения и действия, зарегистрированные согласно настройкам измерения. | Атрибутированное посещение не отражает все показы. Отсутствие реферера или блокировка измерения ограничивают атрибуцию. |
| Документированная панель вопросов | Наличие и точность цитирования в наборе наблюдаемых ответов. | Результат зависит от вопросов, режима, языка и даты. Он не описывает всех пользователей. |
Показы из отчёта Google по ИИ входят в охват Web в Search Console: не прибавляйте их к общему итогу Web. Сравнивайте видимость, цитирования и посещения отдельно.
Сравнить охват двух наблюденийДокументация проверена .
ПРАКТИКУМ ИЗМЕРЕНИЙ
Наличие цитаты и её обоснованность — разные измерения
Отдельно считайте ответы со ссылкой на исследуемый домен и ссылки, содержание которых подтверждает утверждение. В одном ответе бывает несколько ссылок, поэтому знаменатели различаются.
Вымышленный пример · не измерения сайта или клиента
| Показатель | Расчёт или порог | Что позволяет утверждать результат |
|---|---|---|
| Присутствие в ответах | 12 / 40 × 100 = 30 % | 12 из 40 ответов ссылаются на домен: присутствие в этой выборке — 30 %. |
| Подтверждение среди проверенных ссылок | 15 / 20 × 100 = 75 % | 15 из 20 ссылок подтверждают утверждение: 75 % проверенных ссылок. О непроверенных ссылках выводов нет. |
От наблюдения к решению
Зафиксируйте выборку
Сохраните вопросы, язык, сервис, режим, даты и повторы. Включите ответы без ссылок.
Откройте каждую ссылку
Сопоставьте конкретный фрагмент с утверждением; отметьте недоступные и неподтверждающие ссылки.
Сравнивайте одинаковый охват
Для оценки изменений нужны одинаковые выборка и протокол. Публикуйте количества и исключения.
Десять нечитаемых ответов меняют смысл доли
Из 30 попыток программы 20 ответов читаются, 12 из них цитируют цель. Остальные 10 не классифицированы.
| Единица наблюдения | Вымышленные данные |
|---|---|
| Попытки / читаемые / цитаты | 30 / 20 / 12 |
| Доля среди читаемых | 12 / 20 = 60 % |
| Границы по всем попыткам | 12 / 30 = 40 % ; 22 / 30 ≈ 73,33 % |
Относится ли 60 % ко всем 30 попыткам?
60 % относится к 20 читаемым ответам. Для 30 попыток возможные значения 10 неизвестных дают примерно 40–73,33 %. Это описательный, не доверительный интервал.
Источники и метод
- Google Search Central · AI features
- Google — Generative AI performance report (Search)
- Bing — AI Performance
Документация просмотрена .
02 / Сохраняемые доказательства
Сохраняемые доказательства
Постоянный вопрос
ID, точная формулировка, намерение и частота.
Ответ с датой
Текст, снимок, интерфейс, язык и контекст.
Проверенная ссылка
Доступный URL, действительно подтверждающий тезис.
Зафиксированный разрыв
Ошибка, отсутствие, путаница сущностей или необъяснимое изменение.
КОНТРОЛЬНАЯ ТОЧКА
Прежде чем делать вывод
Типичная ошибка трактовки и проверка, которая помогает её избежать.
Поспешный вывод
Одна цитата не доказывает устойчивую видимость или предпочтение системы. Ответы, модели, языки и интерфейсы меняются.
Решающая проверка
Повторять фиксированный набор запросов, записывать параметры и даты. Разделять присутствие, точность, ссылку на источник и реально наблюдаемое влияние на трафик.
ПОСЛЕ ПРОВЕРКИ
Решение по результату
Бренд упомянут без ссылки
Считайте это присутствием, не цитированием. Сохраните ответ и отдельно проверьте точность фактов и правильность сущности.
Ссылка появляется и исчезает
Повторяйте те же вопросы в том же контексте в разные моменты. Запишите изменчивость, прежде чем связывать её с правкой страницы.
Решение и возможность пересмотра
Решение и возможность пересмотра
Что позволяет решить проверка и какие сведения сохранять для пересмотра.
Достаточные данные
Сохраняйте неизменный набор запросов, языки, даты, сервисы, полные ответы и ссылки. Раздельно оценивайте упоминание, точность и проверяемую ссылку.
Следующее решение
Исправьте ложные сведения в собственных материалах. Повторите наблюдение, не выдавая один ответ за тенденцию или гарантию.
Подробные случаи проверки
Типовые ситуации для подготовки проверки. Они не описывают выполненные проекты или реальные наблюдения.
Модель меняется во время серии
Что изучить
Сравните записанные версии моделей, режимы и интерфейсы двух кампаний.
Решение и действие
Разделите периоды и повторите контрольные вопросы вместо объяснения всех изменений сайтом.
Что сохранить
Показанная версия, контрольные вопросы и даты перехода.
Ответ недоступен
Что изучить
Различайте ответ без ссылки, сбой генерации и недоступный сервис.
Решение и действие
Учитывайте пригодные наблюдения отдельно от неудачных попыток; сбой доступа не означает отсутствие цитаты.
Что сохранить
Попытки, доступные ответы и причины исключения.
Ссылка не подтверждает ответ
Что изучить
Открыть процитированную страницу и найти поддержку каждого проверяемого утверждения.
Решение и действие
Различать наличие ссылки и подходящее доказательство.
Что сохранить
Запрос, ответ, открытый URL и соответствие фрагмента.
Проверка перед решением
Эти вопросы дополняют метод. Они помогают установить подтверждённое, сохранив оговорки в записи.
Воспроизводимое сравнение
Одинаковы ли набор вопросов, язык, контекст и протокол до и после изменения? Разделяйте изменение сайта и вариации поисковой системы.
Посмотреть разбор решения
Вымышленный пример: статус относится только к указанному критерию и охвату.
- Вымышленное наблюдение
- Первый замер: 10 вопросов по-французски; второй: 12 переформулированных по-английски.
- Заявленное состояние
- Наблюдаемое расхождение
- Решение и следующая проверка
- Не приписывать разницу сайту. Повторить общий набор, сохранив серии как разные контексты.
Уместная ссылка
Доступен ли каждый цитируемый URL и подтверждает ли он приписанный фрагмент? Сохраняйте неверные ссылки и ответы без цитат, а не только удачные результаты.
Посмотреть разбор решения
Вымышленный пример: статус относится только к указанному критерию и охвату.
- Вымышленное наблюдение
- Ассистент ссылается на доступную страницу: фрагмент говорит о 2023, ответ — о 2024.
- Заявленное состояние
- Наблюдаемое расхождение
- Решение и следующая проверка
- Сохранить ответ, URL и противоречащий фрагмент. Наличие ссылки не равно точной цитате.
Неизвестные в итогах
Отделены ли недоступные и нечитаемые ответы от отсутствующих ссылок? Укажите количества и правило знаменателя.
Изученная документация : NIST · AI Risk Management Framework ·
Посмотреть разбор решения
Вымышленный пример: статус относится только к указанному критерию и охвату.
- Вымышленное наблюдение
- Из 10 попыток отдельно учтены 3 цитаты, 5 ответов без цитат и 2 недоступных ответа.
- Заявленное состояние
- Подтверждено в этих рамках
- Решение и следующая проверка
- Показать 3/10 попыток или 3/8 читаемых ответов по задаче, указав знаменатель и 2 неизвестных.
ИНСТРУМЕНТЫ / РЕЕСТРЫ
Какие сведения сохранить
Считайте цитаты только в наблюдаемой выборке. До расчёта доли сохраните число ответов, ответы без ссылок и повторные прогоны.
- Дата просмотра и часовой пояс
- Точный URL
- Точный запрос
- Интерфейс / режим / аккаунт
- Язык / регион
- Наблюдаемый фрагмент / значение
- Независимый источник
- Решение / следующий шаг
- Ответственный за проверку
- Следующая проверка
03 / FAQ
Частые вопросы
Гарантирует ли llms.txt ссылку?
Нет. Google Search не использует его, в том числе в генеративных функциях. Для других систем изучите документацию и фактическое применение: наличие файла не доказывает ни извлечение, ни цитирование.
Учитывать ли упоминание без ссылки?
Да, как присутствие бренда, отдельно от проверяемой ссылки.
Сколько вопросов отслеживать?
Столько, чтобы охватить важные намерения; стабильный проверенный набор полезнее большого непроверенного.
Можно ли сравнить системы по одному снимку?
Нет. Сохраните точный вопрос, язык, дату, интерфейс и контекст, затем повторите наблюдение.
Как учитывать неверную ссылку?
Отделяйте наличие ссылки от точности тезиса. Видимый источник может подтверждать другое утверждение.
04 / Официальные источники
Официальные источники
Описать задачу
Дополнительные проверки
ПОДРОБНЕЕ / ПРАКТИКА
Организуйте ряд сравнительных наблюдений
Взрывы собираются по воде на различных помощниках. Для того чтобы получить полезное чтение, каждое замечание должно быть связано с протоколом и идентифицируемым вопросом.
Обновлено .
Приоритетные проверки
Идентификатор для вопросов и исполнения. Сохраняйте ответ, источники, платформу, язык и условия, а затем используйте стабильную сеть для классификации результатов.
Ошибки интерпретации
Очевидное изменение может происходить из-за изменения вопроса или протокола. Отсутствие ответа и отсутствие цитаты являются двумя различными событиями.
Рабочий документ для сохранения
Дневник наблюдения позволяет воспроизвести каждый тест и сравнить совместимые серии. Изменения в протоколе записываются с их датой и воздействием на интерпретацию.
ПРИМЕР / ЧТЕНИЕ ЧИСЕЛ
Присутствие не всегда означает точное представление
Вымышленные данные для объяснения метода; это не результаты клиентов и не измерения сайта.
| Наблюдение | Количество | Интерпретация |
|---|---|---|
| Вопросы панели | 40 | Фиксированная база сравнения. |
| Ответы с упоминанием бренда | 12 | 12 / 40 = 30 % панели. |
| Ответы с верным описанием предложения | 8 | 8 / 40 = 20 % панели; 8 / 12 ≈ 66,7 % упоминаний. |
Показать ограничение интерпретации
Чего эти числа не доказывают
Это не доля рынка и не продажи. Упоминание может быть ошибочным. Укажите панель, дату, язык и число повторов.
ПРАКТИЧЕСКАЯ СИТУАЦИЯ / УЧЕБНЫЙ ПРИМЕР
Один цитат исчезает между двумя замечаниями
Этот педагогический случай показывает, как квалифицировать результат исследования или генерированный ответ. Он отличает точные наблюдения, его проверку и вывод, что условия тестирования действительно поддерживают.
Контекст примера
Источник появляется в ответе, а затем больше не цитируется на следующем тесте. Команда сомневается между утратой видимости и изменением полученного ответа.
Предлагаемый подход
Проверьте вопрос, платформу, язык и известные условия. Повторять по документированному правилу и сравнивать предложения, а также источники. Рассмотрим изменения, внесенные в протокол.
Вывод и следующий шаг
Обсервация сохраняется как вариация тестируемой серии. Устойчивое заключение требует совместимого набора выполнений, не превращая двух разных ответов в общую тенденцию.
Вопросы для углублённой практики
Насколько часто повторяются замечания?
Выберите частоту, связанную с потребностью и искаемыми изменениями. Документирование этого правила и исключений позволяет интерпретировать серии, не путая более интенсивную коллекцию с реальной эволюцией.
ПОДРОБНЫЙ ПРАКТИКУМ / ПРИМЕНЕНИЕ
Следить за серией без тихого изменения вопроса
01 / Подготовить необходимые сведения
Составьте список вопросов, идентификаторы выполнения и известные условия. Выяснить изменения в формулировке или платформе, происходящие между сериалами.
02 / Выполнить проверку по методике
Сравнить точные вопросы перед результатами. Отделить версии протокола и сохранять повторения. Квалифицировать различия в цитате с связанными источниками и предложениями.
03 / Рассмотреть альтернативную ситуацию
Если новый вопрос улучшает тест, но меняет намерение, откройте отдельную серию. Древний историк остается полезным со своим первоначальным периметром и формулировкой.
04 / Определить дальнейшие действия
Серия последовательна, когда сравнения указывают на общие условия и различия. Изменения в протоколе видны так же, как и результаты.
05 / Передать материалы проверки
Передавать дневник вопрос, исполнение, ответ и суждение. Идентификаторы облегчают пересмотр рейтинга, не теряя отношения с оригинальными наблюдениями.
РАБОЧИЙ ДОКУМЕНТ / ТАБЛИЦА ПРОВЕРКИ
Серийный дневник, который сохраняет изменения протокола
Журнал объединяет вопрос, версию, исполнение, ответ и суждение. Он позволяет следить за цитатами, одновременно различая наблюдаемую вариацию и изменение условий теста.
На небольшом экране прокрутите таблицу по горизонтали, чтобы прочитать все три столбца.
| Наблюдение | Обоснованная интерпретация | Следующий шаг |
|---|---|---|
| Вопросы и условия сравнимы. | Примечания могут быть приближены в зависимости от определенных категорий. | Рассмотрим источники и предложения, прежде чем описать различия. |
| Формула меняется между двумя сериями. | Часть изменчивости может происходить из нового протокола. | Откройте отдельную версию и сохраните старую серию с ее периметром. |
| Изолированный ответ представлен как тенденция. | Капиталь и охрана не поддерживают эту генерализацию. | Повторять по четкому правилу и назвать неизвестных. |
Проверка рабочего документа
Окончательная проверка проверяет идентификаторы и условия перед графиками. Изменения в протоколе должны быть так же видимы, как и изменения в результатах, чтобы избежать заблудительных сравнений.
ВЫВОД / ПРИМЕР ФОРМУЛИРОВКИ
Презентация результатов: Организация ряда сравнительных наблюдений
Что необходимо уточнить
Новая формулировка вопроса может открыть другую серию, а не тихо продлить старую.
Перед передачей
Назовите версии и объясните размеры, которые остаются сравнимыми.
Пример обоснованного вывода
Сравненные наблюдения используют указанную версию протокола. Результаты, полученные после изменения вопроса, сохраняются в отдельной серии.