Идея простая: не спорить абстрактно, нужны ли агентам канонические профили, а положить рядом разные варианты и смотреть, куда реально ходят боты.
Все страницы эксперимента закрыты от SEO-индексации через noindex, но оставлены follow для обхода. Это важно: мы не хотим создавать thin-content каталог ради Google, мы хотим измерить агентное чтение.
Когорты: A — минимальный профиль, B — структурированные маршруты, C — trust/source-map, D — agent guidance, E — super profile. В каждой группе по 300 профилей.
Метрики доступа: AI-bot reads, search-bot reads, successful 2xx, 499/ошибки, повторные чтения, уникальные профили, глубина обхода по файлам.
Второй слой — interpretation benchmark: одинаковые задачи для разных когорт, чтобы проверить не только чтение, но и качество понимания компании агентом.