Markdown-папки, закрытые от Google, могут роутить сводки из-под пейволла в LLM ради цитаций
Тогда как nosnippet и data-nosnippet контролируют, что именно Google вытягивает для классического и ИИ-поиска, LLM игнорируют data-nosnippet и поглощают весь контент, который встречают на пути.
Опираясь на эпоху AMP для запланированного клиентского эксперимента, Джанлука Фиорелли советует развернуть отдельную папку для LLM с .md-файлами сводок, открытую только для ИИ-краулеров.
Сайты, которые прячут контент за авторизацией и подпиской по юридическим или коммерческим причинам — вроде Statista — обычно блокируют ИИ-ботов ради защиты своих ассетов, из-за чего ChatGPT цитирует сторонние сайты, которым закон позволяет обсуждать закрытые материалы.
Вместо этого предложенный сетап публикует дайджест-версию, содержащую только ту информацию, которую бренд и LLM могут легально и без коммерческого ущерба выдавать широкой публике.
Изолированная директория отдает эти .md-файлы эксклюзивно в LLM, чтобы закрепить авторство первоисточника, и блокирует Google и всех связанных с Google краулеров — это избавляет от лишней работы по пересборке всего сайта на Markdown еще и под Google.