Новый WordPress-плагин ориентирован на решение растущей нагрузки, создаваемой ИИ-системами, постоянно сканирующими веб-сайты и обрабатывающими страницы, изначально не предназначенные для машинной обработки.
Markdown for Agents and Statistics – инструмент, выпущенный The Chancery Lane Project. Он передает ИИ-агентам упрощенные Markdown-версии веб-страниц, удаляя все скрипты, навигационные элементы и другие дополнительные компоненты, которые машины, как правило, игнорируют.
Вместо того чтобы заставлять ИИ-системы обрабатывать полные HTML-страницы, содержащие код макетов и стили, плагин передает им только читаемый контент, сокращая использование токенов и снижая вычислительную нагрузку при доступе ботов к поддерживаемым страницам.
Веб-сайты создаются для людей, а не для ИИ
Оценки, основанные на типичных размерах веб-страниц и закономерностях трафика, показывают, что эффективность решения становится особенно заметной при его широком внедрении в сети.
Использование Markdown вместо чистого HTML обычно уменьшает объем передаваемых данных примерно на 80%, превращая страницу размером 2,3 Мб в нечто, близкое к 0,46 Мб, после удаления элементов макета и вспомогательного кода.
По консервативным оценкам, в случае с 1 000 автоматизированных ИИ-запросов в месяц на сайт, объем передаваемых данных для каждой площадки сократится примерно на 22 Гб в год при предоставлении упрощенного контента поддерживаемым поисковым роботам.
Умножьте это на огромное количество установок WordPress, и общее сокращение нагрузки составит 17,8 млрд Гб в год при тех же предположениях.
Потребление энергии, связанное с передачей и обработкой данных – это еще один аспект для дискуссии, поскольку, по оценкам, среднее потребление электроэнергии для передачи данных и хранения составляет примерно 0,81 кВт⋅ч на Гб.
Используя эти данные, можно подсчитать, что общее ежегодное сокращение потребления энергии может достичь порядка 14,4 млрд киловатт-часов, если внедрение инструмента произойдет по всем платформам WordPress. Реальные показатели, естественно, будут сильно зависеть от характера трафика и уровня внедрения.
«Большинство веб-сайтов созданы для людей, а не для ИИ, а это значит, что системы часто обрабатывают огромные объемы нерелевантных данных, что увеличивает затраты и энергопотребление», — отметил Бен Метц, исполнительный директор The Chancery Lane Project.
«Для The Chancery Lane Project это вопрос обеспечения доступа к высококачественному, соответствующему климатическим требованиям юридическому контенту в условиях кардинальных изменений способов получения информации. Наш плагин решает эту проблему, предлагая чистую, машиночитаемую версию контента, что позволяет эффективнее осуществлять такие задачи, как исследование, подготовка и анализ».
Раннее тестирование показало снижение использования токенов до 90%, когда ИИ-системы обращались к страницам через Markdown вместо их полного рендеринга.
«Повышение эффективности цифровых систем – это не просто техническая проблема. Нужно учитывать и реальные экологические последствия», — отметил Феликс Коэн, директор по цифровым технологиям компании.
Источник: https://labs.chancerylaneproject.org
