Index Harmony

Описание

Установите → запустите мастер настройки → готово. Без ключа, без учётной записи, без платного уровня: каждый модуль и каждый экран измерений в этом плагине бесплатен и полностью работоспособен.

Index Harmony готовит ваш сайт WordPress к ИИ-ассистентам, поисковым машинам ответов и их краулерам (ChatGPT, Claude, Perplexity, Gemini и другим), не трогая ваши файлы и контент, — а затем показывает, что произошло на самом деле. Каждое исправление виртуально и обратимо: выключите модуль — и он исчезает без следа.

What makes it different: most plugins in this space stop at generating llms.txt. Index Harmony pairs the output side with a first-party measurement side that no search-console integration can see: its own AI-bot traffic log with real bot verification (official vendor IP lists plus RFC 9421 Web Bot Auth Ed25519 signature checks), daily per-page counters, a per-page evidence panel showing which engine fetched which page on demand, a crawl-freshness funnel, an attention-decay radar, recovery for 404 URLs that assistants invent, a change log that marks every GEO-affecting setting change on your traffic chart, plus an agent-facing Site MCP endpoint and WordPress Abilities/WebMCP surfaces. llms.txt is one of its 19 modules, not the product.

All 19 fix modules (free, no key needed):

• llms.txt + llms-full.txt (виртуальные конечные точки, обновляются ежедневно; выберите выделяемые страницы вручную или отредактируйте тело файла сами)
• AI bot manager for robots.txt (explicit allow rules for 25 AI bots; your existing rules are kept intact)
• Инжектор схем JSON-LD (Organization / WebSite / Article / FAQ / Breadcrumb / Product) — уступает Yoast, Rank Math, AIOSEO и SEOPress, чтобы избежать дублей
• Дополнитель мета (description / Open Graph / Twitter — только когда этим не занимается ни один SEO-плагин)
• Включение штатной карты сайта WordPress + декларация в robots.txt
• /.well-known/security.txt
• Товарный фид WooCommerce + полнота схемы Product
• Аудитор hreflang (только отчёты — никогда не пишет файл и никогда не выводит тег hreflang)
• /AGENTS.md — руководство по использованию сайта для агентов (виртуальное)
• Markdown negotiation (Accept: text/markdown or ?format=md) — responses carry an X-Markdown-Tokens estimate, the Markdown for Agents convention
• Конечные точки обнаружения .well-known (api-catalog RFC 9727; mcp.json и agent-skills только при настройке — никаких фальшивых манифестов)
• Agent-discovery Link headers + robots.txt Content-Signal declaration (search / ai-input / ai-train, plus the optional use= field introduced in 2026)
• AI bot traffic log (which bot visited when — visits carrying a Web Bot Auth Signature-Agent header are flagged with the signer’s key-directory host, and while bot verification is enabled their Ed25519 request signatures are cryptographically verified against the signer’s published keys)
• AI policy publishing (ai.txt + TDMRep + Content-Signal header + IETF Content-Usage directive in robots.txt and as an HTTP header)
• RSL content licensing — a virtual RSL 1.0 license.xml derived from your policy axes, plus the robots.txt License pointer (opt-in)
• Заголовки безопасности — шесть необязательных заголовков ответа (X-Content-Type-Options, Referrer-Policy, Permissions-Policy, HSTS, CSP-Report-Only, X-Frame-Options); все выключены по умолчанию и выбираются по одному в Настройки → Дополнительно
• Мгновенная индексация IndexNow (Bing/Yandex/Seznam/Naver — opt-in)
• WebMCP (агентная поверхность в браузере для публичной информации вашего сайта)
• Доля ИИ-трафика (opt-in ежедневные счётчики каналов)

Измерения и аналитика:

• Консоль трафика ботов — график за 30 дней и разбивка визитов ИИ-краулеров по ботам
• Bot verification (opt-in) — once enabled, downloads public bot IP lists and Web Bot Auth signature key directories once a day to flag spoofed bots and cryptographically verify signed agents (works even behind a proxy/CDN, where IP checks must abstain); no visitor data leaves your site
• Блокировка ботов и оповещения о всплесках (opt-in) — выберите ботов для наблюдения и включайте блокировку когда решите, за явным подтверждением; панель сначала рекомендует 7-дневное окно наблюдения и предупреждает, если включить раньше, но ничего не заблокировано по времени, и блокировку можно остановить одним кликом; необязательное письмо при всплесках трафика
• Анализ страниц — ежедневные постраничные счётчики (нейтральные к GDPR: без IP, без user-agent) питают постраничную панель доказательств, показывающую по запросу, какой движок какую страницу забрал, воронку свежести сканирования (какие страницы изменились после последнего обхода) и 28-дневный радар угасания внимания для страниц, к которым ИИ теряет интерес
• Восстановление фантомных URL ИИ-404 — отчёт об URL, которые ассистенты считают существующими (обращения 404 с ИИ user-agent или реферером ИИ-платформы), ближайшая реальная страница, предложенная по редакционному расстоянию, и необязательный построчный 301, применяемый ТОЛЬКО к запросам ИИ-происхождения
• Журнал изменений GEO — каждое влияющее на видимость изменение настроек отмечается на графике трафика с честной дельтой до/после (корреляция, а не причинность)
• Тревоги здоровья ботов — страж тишины для регулярных краулеров, которые замолкают, и защита от волны подделок с явно подтверждаемым переключателем «403 только поддельным» в один клик
• Балл готовности страницы + Триаж — постраничный подбалл готовности контента с метабоксом в редакторе и общесайтовым представлением триажа
• Еженедельное (или ежедневное) письмо-сводка (opt-in) — обзор трафика ботов, угасающих страниц и ваших самых слабых страниц

Принципы честности

• Файлы не записываются — всё отдаётся виртуально и отключается без следа.
• Никакого клоакинга — люди и боты видят одинаковый контент; отличаться может только формат, когда клиент его запрашивает.
• Никаких фальшивых манифестов — файлы обнаружения публикуются только тогда, когда описывают что-то реальное.
• Никаких поверхностей допродаж — этот плагин никогда не просит у вас ключ и никогда его не хранит.

Языки

Панель администратора поставляется полностью переведённой на 17 языков: English, Türkçe, Deutsch, Español, Français, Italiano, Nederlands, Polski, Português, Русский, 日本語, 한국어, العربية, فارسی, हिन्दी, Bahasa Indonesia, Tiếng Việt. RTL-раскладки поддерживаются для арабского и персидского. Переводы встроены в сам плагин (не поставляются как языковые пакеты WordPress.org).

Внешние службы

Этот плагин может подключаться к перечисленным ниже сторонним/внешним службам. Ничего не запрашивается при установке или втихую: каждое подключение либо требует явного opt-in переключателя (по умолчанию выключен), либо происходит только при нажатии кнопки. С нетронутыми настройками по умолчанию плагин не делает исходящих запросов и не собирает телеметрию.

1. Служба сканирования Index Harmony (управляется нами на indexharmony.com)

• What it is / why: the optional site-readiness scan — a 134-check audit of how your site looks to AI crawlers. Scoring that requires fetching your pages from the outside, which cannot be done from inside your own WordPress, so the scan runs on the service’s servers.
• Что и когда отправляется: когда вы нажимаете «Сканировать» в консоли, браузер открывает страницу сканирования службы в новой вкладке с публичным адресом вашего сайта в URL, и сканирование выполняется там. Отчёт показывается на собственной странице службы — он не возвращается в вашу консоль, а этот плагин не делает последующих запросов, не хранит id задания и не сохраняет результат сканирования. Ничего не отправляется при установке, по расписанию или в фоне.
• В этом плагине нет поля ввода ключа, шага разблокировки, проверки статуса лицензии и обращения в поддержку, и он не хранит ни ключа, ни токена для этой службы.
• Условия обслуживания · Политика конфиденциальности

2. AI-crawler IP lists and signature key directories for bot verification (opt-in, off by default)

Когда вы включаете «проверку ботов», плагин примерно раз в сутки скачивает публичные списки диапазонов IP (только для чтения), публикуемые каждым поставщиком, чтобы отличать настоящих ИИ-краулеров от поддельных user-agent. Выполняется только обычный HTTP GET к фиксированным URL ниже — ничего из контента сайта, настроек или данных посетителей этим поставщикам не отправляется.

The same daily job also fetches Web Bot Auth signature key directories: when a bot visit carries an RFC 9421 Signature-Agent header, the plugin downloads that signer’s public Ed25519 keys from the fixed, standardised path /.well-known/http-message-signatures-directory on the key-directory host the signed request itself declares (for example Google’s agent identity or OpenAI’s signing hosts), so later signed requests can be verified locally. This is a plain GET of a public key file — nothing about your site or visitors is sent; hosts are strictly validated, capped at 16, and requests go through WordPress’s safe-URL transport (private and loopback addresses are refused).

• OpenAI — openai.com/gptbot.json, /searchbot.json, /chatgpt-user.json · Условия · Конфиденциальность
• Anthropic — claude.com/crawling/bots.json · Условия · Конфиденциальность
• Perplexity — perplexity.com/perplexitybot.json, /perplexity-user.json · Условия · Конфиденциальность
• Amazon — developer.amazon.com/amazonbot/ip-addresses/ · Условия использования · Уведомление о конфиденциальности
• Mistral — mistral.ai/mistralai-user-ips.json · Условия · Конфиденциальность
• Google — developers.google.com/static/crawling/ipranges/user-triggered-agents.json (Google-Agent) · Terms · Privacy
• Microsoft Bing — без HTTP-запроса; bingbot проверяется стандартным обратным DNS-запросом (PTR должен оканчиваться на search.msn.com) через резолвер вашего сервера · Соглашение об использовании служб Microsoft · Заявление о конфиденциальности

3. IndexNow (opt-in модуль, по умолчанию выключен)

• Что это / зачем: протокол мгновенной индексации, управляемый Microsoft Bing и используемый участвующими поисковиками (Bing, Yandex, Seznam, Naver), чтобы сразу узнавать о новом или обновлённом контенте.
• Что и когда отправляется: когда вы публикуете или обновляете публичную запись, её URL, хост вашего сайта и ключ IndexNow вашего сайта отправляются POST-запросом на api.indexnow.org. Больше ничего не передаётся.
• Условия использования IndexNow · Заявление о конфиденциальности Microsoft

Разработчик

agrc_bot_visit_post_id

Сопоставляет записанный визит бота с записью WordPress, которую представляет запрошенный путь.

Сайты, отдающие страницы через собственный маршрутизатор (правило перезаписи или обработчик template_include, работающий после template_redirect с приоритетом 0), не имеют запрошенного объекта в момент записи визита, поэтому визит сохраняется без привязанной записи. Такие страницы выпадают из представлений на основе записей — корреляции готовности, слепых зон, свежести контента и воронки сканирования — а слепые зоны могут даже отмечать их как «ещё не посещённые ни одним ботом».

Только маршрутизатор знает, какую запись представляет путь, поэтому решение делегируется ему. Фильтр является opt-in: без подключённого колбэка поведение не меняется.

add_filter( 'agrc_bot_visit_post_id', function ( $post_id, $bot_id, $path ) {
    if ( 0 === $post_id && 0 === strpos( $path, '/catalog/' ) ) {
        return my_router_resolve_post_id( $path ); // int, or 0 when unknown
    }
    return $post_id;
}, 10, 3 );

Параметры:

• int $post_id — ID записи, определённый WordPress; 0, когда запрос не является отдельной записью (архивы, список блога, 404 и по-настоящему виртуальные страницы).
• string $bot_id — идентификатор реестра совпавшего краулера, напр. gptbot.
• string $path — путь запроса без строки запроса, усечённый до 255 символов; байт в байт то, что хранится в строке визита.

Верните целое число. Нечисловые значения игнорируются, отрицательные приводятся к 0. Фильтр выполняется один раз на визит бота и никогда — на человеческом трафике.

По-настоящему виртуальные страницы (без какой-либо записи WordPress) нельзя оценить, потому что баллы готовности живут в метаданных записи. Такие пути перечисляются в отдельной секции карточки «Интерес ботов x готовность», чтобы отчёт оставался честным, а не отбрасывал их молча.