Парсеры ИИ вслепую сносят микроразметку JSON-LD, а Perplexity убивает контент старше шести месяцев

Агрессивная чистка кода, которую используют боты ИИ, делает их слепыми к стандартной микроразметке, палит Мартин Степанек.

Поскольку тяжелые JS-фреймворки дают соотношение текста к HTML на уровне 0.05%, краулеры ChatGPT и Claude жестко вычищают код, чтобы срезать затраты на вычисления при живом запросе.

По умолчанию они сносят все теги <script> — и это моментально уничтожает микроразметку JSON-LD.

В тесте с 8 уровнями скрытия цены Claude не смог вытащить ни одного прайса на товар (0 из 8), потому что тупо удалил базовую разметку еще до начала обработки.

Рендеринг на базе JS заставляет LLM галлюцинировать и выдумывать критические данные во время пакетных запросов.

Когда юзер просит у ChatGPT несколько товаров с target.com, запрос запускает живой парсинг, а не лезет в индекс Google.

А так как цены живут только в JS-коде, бот либо отдает ошибку "цена недоступна", либо полностью выдумывает цифры.

Игровой ноут за $1,300 превратился в $2,100 — бот фатально перепутал плашку скидки в $800.

Тем временем алгоритмы устаревания контента и серверные задержки жестко зачищают видимость.

При этом и сам Google закручивает гайки: среднее время до автоматической деиндексации URL, который давно не сканировался, упало со 130 до примерно 90 дней, а число не попавших в индекс страниц выросло на 50–70%.

В отличие от Google, который ранжирует 20-летние страницы, ИИ-системы навязывают строгие пороги свежести.

Около 65% цитат в ИИ ссылаются на контент, опубликованный за последний год, а Perplexity навсегда выкашивает статьи старше шести месяцев.

Более того, медленный ответ сервера вызывает ошибку 499 client closed request в логах Nginx; если живой парсинг тормозит ответ пользователю в реальном времени, бот просто дропает соединение.