Public crawl (observe)

Уровень L3 · статус available

Сканирование публичных страниц без доступа к CMS.

Обзор

Наблюдение без записи: агент обходит публичные URL, собирает title/description/h1 и технический срез. Запись на сайт недоступна.

Что нужно заранее

Публично доступный сайт (или staging с basic-auth — уточните support).
robots.txt не блокирует нужные разделы (или allowlist в кабинете).

Установка

В кабинете создайте проект с доменом.
Подключение → Public crawl (observe) — zip не нужен.

Настройка в кабинете

Укажите стартовый URL / sitemap при наличии.
Режим проекта: observe — запись запрещена политикой.
Добавьте ключевые слова и дождитесь первой волны миссий-рекомендаций.

Проверка

В журнале появятся сканы страниц и issues (missing_title и т.п.).
Попытка авто meta-тегов должна быть запрещена — это ожидаемо.

Важно

Чтобы писать meta, подключите WordPress / GenericHttp и сделайте его primary.
Для трафика в советнике — установите beacon (см. /docs/connectors/beacon) или подключите CMS с getSiteMetrics.

Счётчик (beacon)

Опционально для метрик в AI-советнике:

Опционально: first-party счётчик для AI-советника (визиты, топ страниц).
Кабинет → Подключение → «Счётчик сайта» → выпустить ключ bea_…
Вставьте в <head> (подробно: /docs/connectors/beacon):
<script async src="https://aita.dyadyasasha.ru/embed/seo-beacon.js"
  data-project="PROJECT_ID" data-key="bea_…" data-api="https://52525.ru/aita/api"></script>
Без beacon советник работает в limited режиме (SEO/crawl без трафика).

Эндпоинты протокола: /docs/api · старт: getting started