Google выпустила Modern Web Guidance 1.0 — бесплатный набор рекомендаций для ИИ-агентов, которые пишут код веб-приложений. Он призван помочь инструментам использовать актуальные возможности браузеров и учитывать производительность и доступность.
О выпуске сообщил инженер Google по работе с разработчиками Филип Уолтон в блоге Chrome for Developers. В версии 1.0 появился аудит существующего кода; к проекту также присоединяются Firefox и Edge. Раннюю предварительную версию Chrome представила в мае на Google I/O.
Что изменилось в версии 1.0
Аудит проверяет файлы HTML, CSS, JavaScript и package.json, чтобы найти возможности для безопасного обновления кода, после чего помогает агенту внести изменения. Первая версия использует статический анализ и охватывает ограниченное число шаблонов кода.
По данным Google, руководства теперь охватывают сотни проверенных пробелов в знаниях ИИ. Компания также сообщает, что в её тестах современные модели по-прежнему испытывают трудности с доступностью, заголовками безопасности и приоритетом загрузки скриптов и изображений.
Google утверждает, что каждое руководство проверяет и утверждает технический руководитель соответствующего направления. Руководства по функциям для пользователей дополнительно проверяют на доступность эксперты, ежедневно использующие вспомогательные технологии.
Документ об управлении проектом, загруженный в репозиторий GitHub 9 ноября, предусматривает шесть мест для владельцев проекта: два для Chrome, по одному для Microsoft Edge и Mozilla и два для независимых экспертов по веб-платформе. Одно независимое место пока вакантно; у Apple места нет.
Результаты тестов и их ограничения
Google опубликовала панель с результатами ночных тестов агентов Anthropic, OpenAI и Google, которые выполняют одинаковые задачи с рекомендациями и без них. Затем браузер проверяет DOM, стили и исходный код готовых приложений.
По совокупным результатам запусков, завершённых 8 ноября, агенты с рекомендациями прошли 88% автоматических проверок, а без них — 56%. На каждого агента приходилось от 199 до 215 задач. Проверки доступности включают поддержку клавиатуры, фокуса и подписей полей, но не являются полным аудитом WCAG.
В заданиях рекомендации не упоминаются, поэтому агентам приходится самим определять, когда они применимы. В большинстве недавних наборов тестов запуски с рекомендациями занимали больше времени и расходовали больше токенов.
Консультант по доступности Адриан Розелли в мае проверил предварительную версию, попросив инструмент Google Antigravity создать анимированный аккордеон по примеру из документации. По его словам, результат не соответствовал WCAG, а анимация не работала в Firefox. Он также не нашёл гарантий того, что агенты смогут следовать рекомендациям. Проверка относилась к предварительной версии, а не к 1.0.
Опыт первых пользователей
Японская платформа для авторов note inc. проверила двух агентов на шести задачах по созданию интерфейса, проведя 180 запусков на копиях своего рабочего кода. Согласно блогу Chrome, результаты по 19 браузерным проверкам улучшились после установки рекомендаций и выросли ещё раз, когда их явно указали в запросе. Для первого агента показатели составили 60,8%, 76,5% и 94,0%, для второго — 75,8%, 86,2% и 90,0% соответственно.
MetaMask использует рекомендации для автоматической проверки каждого pull request в своём браузерном расширении с открытым кодом. Согласно другому материалу Chrome, за первые пять недель, до 21 октября, бот выявил 102 проблемы в 57 запросах с новыми функциями и исправлениями. Инженеры полностью устранили 43 проблемы, частично — три; ещё 16 замечаний были отклонены или оказались ложными срабатываниями. Двадцать проблем остались без изменений, судьба остальных 20 неизвестна.
Установка и планы
Установить набор можно командой npx modern-web-guidance@latest install в директории проекта. По словам Google, он также доступен в каталогах расширений большинства популярных агентов для программирования. Пользователи предварительной версии могут обновить его командой npx modern-web-guidance@latest update.
Google планирует расширить аудит существующего кода и добавить проверки, в которых агент будет анализировать сам проверяемый код. Компания также предлагает использовать рекомендации вместе с Chrome DevTools для агентов, чтобы запускать и проверять созданный код в браузере.
Комментариев пока нет. Начните обсуждение.