13.1Технический справочник: директивы, коды, разметка и сроки по справкам Яндекса и Google

Раздел о текущем состоянии справок Яндекса и Google, проверено на 26.10.2026; пересматривается раз в квартал.

Этот справочник открывают не для чтения, а когда задача уже поставлена: разработчик спрашивает, как записать правило для параметров, подрядчик прислал robots.txt на согласование, после переезда в панели появился незнакомый статус. В главах книги — принципы, критерии и порядок диагностики: что выбрать и почему. Здесь — как именно это записать и что на сегодня пишет об этом справка каждой системы.

Синтаксис и поддержка меняются быстрее всего остального в SEO. За последние три года Google убрал из выдачи блок вопросов, пошаговые инструкции и окно поиска по сайту, а Яндекс отказался от карты сайта для языковых версий. Поэтому у каждого блока — ссылка на главу, где объяснено, зачем это нужно. Если справка разошлась со справочником, прав справка: проверьте её, прежде чем ставить задачу на сотню шаблонов.

Чего здесь нет. Нет порядка проверки сайта — он в чек-листе аудита (П2). Нет определений — они в главах и в глоссарии. И нет ответа на вопрос «стоит ли»: правильно записанная директива там, где она не нужна, — аккуратно сделанная ошибка. Примеры кода показывают форму записи, а не готовую конфигурацию.

robots.txt: директивы и различия систем

Ответ самого файла решает больше, чем его содержимое:

User-agent: *
Disallow: /cart/
Disallow: /search/
Disallow: /*?sort=

User-agent: Yandex
Disallow: /cart/
Disallow: /search/
Disallow: /*?sort=
Clean-param: utm_source&utm_medium&utm_campaign
Clean-param: sid /catalog/

Sitemap: https://example.ru/sitemap.xml

Правила общей секции в секцию Yandex не наследуются — их повторяют. Запрет обхода не убирает страницу из индекса, а закрытая в robots.txt страница не покажет роботу свой noindex. Подробнее — в главе «Индексация и управление обходом».

Роботы нейросетей и ответы ИИ

В Google исключение из обзоров от ИИ, режима ИИ и генеративных функций Discover делается не в robots.txt, а настройкой ресурса в Search Console (Search generative AI): у всех сайтов с 31.08.2026; дочерний ресурс наследует настройку ближайшего родителя, у которого она задана вручную; вступает в силу обычно за 1–2 дня; не используется как сигнал ранжирования в остальном поиске; на обучение не влияет — для него Google-Extended. Постраничного управления этой настройкой на 26.10.2026 нет. Убрать содержимое из поиска Google целиком — только noindex.

Кого закрывать сайту услуг и порталу — в главе «Индексация и управление обходом». Пример для портала:

# портал: обучение — нет, ответы ассистентов — да
User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Google-Extended
Disallow: /

# раздел, который не должен попадать в ответы Алисы AI
User-agent: YandexAdditionalBot
Disallow: /premium/

llms.txt — предложенный формат, не стандарт; Google пишет, что его Поиск этот файл игнорирует, заявлений Яндекса о поддержке нет. Подробнее — в главах «Индексация и управление обходом», «Google и Яндекс» и «Как читать утечки, патенты и заявления».

Карта сайта: формат и поля

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
  <url>
    <loc>https://example.ru/uslugi/zamena-smesitelya/</loc>
    <lastmod>2026-10-12</lastmod>
  </url>
</urlset>

В карте — только адреса с ответом 200, без noindex, перенаправлений и дублей; дата изменения — только после существенной правки. Карта генерируется из того же источника, что и страницы. После переезда Google советует какое-то время держать в панели и старую карту со старыми адресами, и новую. Подробнее — в главах «Индексация и управление обходом» и «Миграции, редизайн и переезды».

Коды ответа сервера

Google по умолчанию проходит до 10 перенаправлений подряд. На плановые работы — 503, и не дольше нескольких дней. Три выдуманных адреса на сайте должны отвечать 404, а не 200 и не перенаправлением на главную. Подробнее — в главе «Индексация и управление обходом».

Метатеги и заголовки управления индексацией

<meta name="robots" content="noindex, follow">

X-Robots-Tag: noindex
X-Robots-Tag: googlebot: nosnippet

Заголовок нужен для файлов — документов, прайсов, вложений, где метатег поставить некуда. Если адрес закрыт в robots.txt, ни метатег, ни заголовок роботом не прочитаются. Noindex в исходном коде Google может не дать странице дойти до рендеринга, а снятие noindex скриптом может не сработать. Подробнее — в главе «Индексация и управление обходом».

Канонический адрес, параметры и пагинация

<link rel="canonical" href="https://example.ru/catalog/smesiteli/">

Link: <https://example.ru/files/price.pdf>; rel="canonical"

Clean-param — только Яндекс: Clean-param: p0[&p1&…&pn] [префикс пути]. Параметры — через &; без префикса правило действует на весь сайт; в префиксе допустимы A-Za-z0-9.-/*_, регистр учитывается; длина правила — до 500 символов; для разных скриптов — разные строки. Метки utm_*, ysclid, yrclid Яндекс может удалять сам. Disallow сильнее Clean-param: закрытый адрес не склеится, а просто не будет обойден.

То же делает настройка GET-параметров в Вебмастере (вступает в силу в течение недели); при противоречии с robots.txt робот выполняет правило-запрет. В Google инструмента параметров нет с 2022 года — остаются canonical и ссылки без параметров. Для фильтров: ненужные сочетания Google советует закрывать от обхода в robots.txt, у нужных — постоянный порядок фильтров в пути, пустые сочетания — 404. Печатная версия — стилями страницы, а не отдельным адресом. Подробнее — в главах «Дубликаты» и «Структура сайта и перелинковка».

Атрибуты ссылок и отклонение ссылок

<a href="https://partner.example/" rel="sponsored">…</a>
<a href="https://forum.example/" rel="ugc nofollow">…</a>

Значения можно сочетать через пробел или запятую. На внутренних ссылках nofollow не ставят: адрес остаётся известным, обход не экономится. Файл отклонения ссылок Google: обычный текст .txt в UTF-8 или 7-битной ASCII; одна строка — один адрес или домен с префиксом domain:; комментарии — с #; до 100 000 строк и 2 МБ; один список на ресурс, новая загрузка заменяет старую; ресурс-домен не поддерживается. Это продвинутая функция — для случаев ручных мер или их риска.

# размещения 2024 года, владельцы не ответили
domain:spam-catalog.example
https://blog.example/post-123.html

Подробнее — в главах «Ссылочные факторы» и «Структура сайта и перелинковка».

Статусы исключения в панелях вебмастеров

В справке Яндекса о причинах исключения статусы названы описательно: «Страница дублирует содержание другой страницы», «Страница не является канонической». Строки одной клетки близки по смыслу, но не тождественны. Подробнее — в главах «Дубликаты» и «Индексация и управление обходом».

Перенаправления, зеркала и переезды

Для переезда — только перенаправление на сервере, тот же путь на новом адресе, в один шаг: http → https → www → новый домен схлопываются в одно правило. Исключение — Яндекс: при одновременной смене домена и путей нужны два перенаправления (старый путь на новом домене → новый путь). Регистр, слеш и параметры обрабатываются там же, UTM-метки сохраняются. Порядок правил — частные, затем шаблон, затем запасной 404; не перенаправлять всё на главную.

# nginx: старый домен → новый, путь и параметры сохраняются
server {
    listen 80;
    listen 443 ssl;
    server_name old-example.ru www.old-example.ru;
    return 301 https://example.ru$request_uri;
}

Зеркала в Яндексе: адреса одного сайта объединяются в группу, в поиске — главный; если группа сложилась неверно, её разгруппировывают и запускают переезд с главного адреса. Google зеркал как понятия не использует — для него это канонизация на уровне сайта. Точка отката и закрытые точки сети — в главах «Миграции, редизайн и переезды», «Индексация и управление обходом» и «Сеть филиалов».

Мобильная версия, рендеринг и скорость

Отдельная мобильная версия связывается постранично. На каждой десктопной странице — указание на мобильный аналог, на мобильной — канонический адрес десктопной. Перенаправление ведёт на аналогичную страницу, а не на главную: Яндекс проверяет, что цель перенаправления совпадает с адресом в rel="alternate", иначе мобильную версию в выдаче не подставляет. При динамической выдаче на одном адресе — заголовок Vary: User-Agent. Адаптивной вёрстке нужен viewport.

<!-- на https://example.ru/page/ -->
<link rel="alternate" media="only screen and (max-width: 640px)"
      href="https://m.example.ru/page/">

<!-- на https://m.example.ru/page/ -->
<link rel="canonical" href="https://example.ru/page/">

<meta name="viewport" content="width=device-width, initial-scale=1">

Рендеринг в Яндексе — настройка «Рендеринг страниц JavaScript» в Вебмастере, по умолчанию «На усмотрение робота Яндекса». При серверной отрисовке или пререндеринге справка советует рендеринг отключить. Ожидание загрузки задаётся объектом window.YandexRotorSettings в коде страницы до DOMContentLoaded:

<script>
window.YandexRotorSettings = {
  WaiterEnabled: true,
  FailOnTimeout: true,
  IsLoaded: function () {
    return document.querySelector('#prices') !== null;
  }
};
</script>

Google: ссылки — только <a href>; адреса — через History API, а не фрагменты #; отсутствующая страница в одностраничном приложении — 404 или noindex, иначе ложная ошибка 404; бесконечной ленте — постраничные адреса; содержимое по нажатию или прокрутке может не попасть в индекс.

INP заменил FID 12.03.2024. В Яндексе в «Ошибках на сайте» есть предупреждение о долгом ответе сервера — страницы загружаются дольше 3 секунд. Приёмы уровня кода: приоритет загрузки главного изображения, отложенная загрузка ниже первого экрана, заранее зарезервированные места под картинки и блоки, шрифты без блокировки отрисовки. Подробнее — в главе «Скорость, рендеринг, мобильные».

Структурированные данные: форматы и поддержка

Организация и локальный бизнес

<script type="application/ld+json">
{
  "@context": "https://schema.org",
  "@type": "Plumber",
  "name": "Сантехник Север",
  "url": "https://example.ru/",
  "logo": "https://example.ru/logo.png",
  "telephone": "+7-495-000-00-00",
  "address": {
    "@type": "PostalAddress",
    "streetAddress": "ул. Примерная, 1",
    "addressLocality": "Москва",
    "postalCode": "125000",
    "addressCountry": "RU"
  },
  "openingHours": "Mo-Su 08:00-22:00",
  "areaServed": "Северо-Западный административный округ",
  "sameAs": ["https://yandex.ru/maps/org/000000/"]
}
</script>

Данные — те же, что на странице и в карточках на картах. У бизнеса без офиса для посетителей — зона обслуживания вместо адреса. У сети каждая точка — своя страница и своя разметка. Яндекс принимает типы, унаследованные от Organization и Place, поля name, url, telephone, address, geo (только GeoCoordinates), openingHours; страница с разметкой должна быть доступна по ссылке с главной. Яндекс в справке показывает микроданные — проверяйте валидатором Вебмастера.

Service — только для понимания страницы: особого вида в выдаче у услуги нет ни в одной системе; размечать услугу как товар ради звёзд — обход правил.

Отзыв и рейтинг

{
  "@context": "https://schema.org",
  "@type": "Product",
  "name": "Смеситель для кухни, модель 100",
  "aggregateRating": {
    "@type": "AggregateRating",
    "ratingValue": "4.6",
    "reviewCount": "38"
  },
  "review": [{
    "@type": "Review",
    "author": {"@type": "Person", "name": "Ирина"},
    "reviewRating": {"@type": "Rating", "ratingValue": "5"}
  }]
}

Когда звёзды допустимы и когда отнимают клики — в главе «Разметка и структурированные данные». По справке Google: отзывы компании о самой себе в Organization и LocalBusiness звёзд не дают; размеченные отзывы видны на странице; при вложении itemReviewed не указывают (уточнение от 12.11.2025); поддельные и нераскрытые стимулированные отзывы запрещены (с 24.07.2026). Обязательные поля: у Review — author, reviewRating.ratingValue; у AggregateRating — ratingValue и ratingCount или reviewCount.

Вопросы и ответы

FAQPage ради вида в выдаче не нужен: в Google блок вопросов не показывается с 07.05.2026, документация удалена 15.06.2026. В Яндексе для вопросов пользователей — QAPage: один вопрос на страницу, ответы — acceptedAnswer и suggestedAnswer.

Видео

{
  "@context": "https://schema.org",
  "@type": "VideoObject",
  "name": "Как мы меняем стояк за один день",
  "description": "Замена стояка в панельном доме, этапы и сроки.",
  "thumbnailUrl": "https://example.ru/video/stoyak.jpg",
  "uploadDate": "2026-09-15T10:00:00+03:00",
  "duration": "PT4M20S",
  "contentUrl": "https://example.ru/video/stoyak.mp4",
  "hasPart": [{
    "@type": "Clip",
    "name": "Отключение воды",
    "startOffset": 35,
    "url": "https://example.ru/video/stoyak/?t=35"
  }]
}

Обязательные поля Google: name, thumbnailUrl, uploadDate. Разметка — на странице, где ролик можно посмотреть. Clip задаёт ключевые моменты вручную, SeekToAction — шаблон адреса с {seek_to_second_number}; обоим нужен ролик от 30 секунд с переходом по времени. Отказаться от ключевых моментов — nosnippet.

Хлебные крошки

{
  "@context": "https://schema.org",
  "@type": "BreadcrumbList",
  "itemListElement": [
    {"@type": "ListItem", "position": 1, "name": "Услуги", "item": "https://example.ru/uslugi/"},
    {"@type": "ListItem", "position": 2, "name": "Сантехника", "item": "https://example.ru/uslugi/santehnika/"}
  ]
}

Что Google убрал из выдачи

Подробнее — в главе «Разметка и структурированные данные»; разметка организации и филиалов — в главе «Локальная выдача и карты».

Изображения, видео и товарные фиды

Подробнее — в главах «Вертикальный поиск» и «Другие типы проектов».

hreflang и x-default

<link rel="alternate" hreflang="ru" href="https://example.com/ru/">
<link rel="alternate" hreflang="kk-KZ" href="https://example.kz/kk/">
<link rel="alternate" hreflang="ru-KZ" href="https://example.kz/ru/">
<link rel="alternate" hreflang="x-default" href="https://example.com/">

Link: <https://example.com/ru/file.pdf>; rel="alternate"; hreflang="ru"

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
        xmlns:xhtml="http://www.w3.org/1999/xhtml">
<url>
  <loc>https://example.com/ru/</loc>
  <xhtml:link rel="alternate" hreflang="kk-KZ" href="https://example.kz/kk/"/>
</url>
</urlset>

Частые ошибки кодов: Великобритания — GB, а не UK (зарезервированные EU, UN, UK бесполезны); украинский язык — uk; казахский язык — kk, Казахстан — KZ. Языки Яндекса на 26.10.2026: az, sq, en, ar, hy, ba, be, bg, hu, el, ka, da, he, es, it, kk, ca, lv, lt, mk, de, nl, no, fa, pl, pt, ro, ru, sr, sk, sl, tt, tr, uk, fi, fr, hr, cs, sv, et — узбекского (uz) в списке нет. Отчёта о международном таргетинге в Search Console нет с 2022 года: взаимность и коды проверяют краулером. Часть доменов стран Google считает общими (.io, .me, .tv и другие — список в справке). Регистрация .kz требует сервера в Казахстане.

Версии переключаются ссылками, без перенаправления по адресу или языку браузера: у каждой версии ответ 200, предложение сменить версию — плашкой, выбор запоминается только для человека. Поддомены, которые Яндекс объединил в группу из-за перенаправления, разделяют заявкой. Подробнее — в главах «Международное и многоязычное SEO» и «Региональность и мультирегиональность».

Регион в Яндексе и адрес сайта в карточках

Подробнее — в главах «Региональность и мультирегиональность», «Локальная выдача и карты» и «Сеть филиалов».

Адреса страниц

• Латиница: транслитерация или английские слова — одна система на весь сайт.
• Слова через дефис, нижний регистр, без спецсимволов; один вариант слеша, второй перенаправляется.
• Коротко, без года, цены, «акции», названия отдела.
• Кириллические адреса допустимы: Яндекс распознаёт их в исходном и кодированном виде; в robots.txt и заголовках — только в URL-кодировке. Работающие адреса ради транслитерации не меняют.
• Карточка товара — свой адрес, не зависящий от пути категории.
• Фильтры: постоянный порядок в пути; посадочные — только под спрос; пустые сочетания — 404.

Подробнее — в главе «Структура сайта и перелинковка».

Лимиты панелей и выгрузок

Формулы агрегации: кликабельность — из сумм кликов и показов, а не средним по строкам; позиция — с весом по показам; год к году — недели со сдвигом на 364 дня; небрендовые клики Search Console — итог минус брендовые. Выгрузки хранят у себя помесячно. Подробнее — в главах «LLM в аналитике и диагностике» и «Аналитика и метрики».

Сроки

Сверка фактов и стоп-список для текстов с ИИ

Цифру из прайса на страницу переносит шаблон, а сверку готовых страниц с фактами владельца делает скрипт.

Список стартовый, пополняется по нише. Если при выборочном чтении ошибок нет, верхняя граница их доли — «правило трёх»: 10 страниц → 30 %, 30 → 10 %, 50 → 6 %, 100 → 3 %, 300 → 1 %. Подробнее — в главах «Текстовые факторы», «LLM в рабочих процессах» и «Семантика и контент с LLM»; промпты — в библиотеке промптов (П3).