Googleは11月11日(現地時間)、Chrome for Developersブログで、ウェブ開発においてAIが間違える上位10項目を紹介する記事を公開した。同社が同週にバージョン1.0をリリースした「Modern Web Guidance」の評価結果に基づく。Modern Web Guidanceは、ウェブプラットフォームの専門知識、ベストプラクティス、ブラウザの互換性データをコーディングエージェントに組み込むスキル群だ。
評価スイートでは、Modern Web Guidanceをインストールしたエージェントとしていないエージェントに同じプロンプトを送り、両方の出力を各ガイドで定義した期待値と照合した。ガイドなしのエージェントの合格率は平均約50%、ガイド付きでは約90%だった。各チェックの内容とモデルごとのスコアは、評価ダッシュボードで確認できる。
挙げられた10項目は、キーボードフォーカスとinertの管理、モーション抑制のサポート、フォーム検証・形式のヒント・自動入力、スワイプとタップの操作、ダイアログ・ポップオーバー・最上位レイヤの遷移、ダークモードとテーマ適応型コントロール、ランタイムの応答性と滑らかさ、レイアウトシフトと視覚的なちらつき、DOM XSS防御とHTMLサニタイズ、パスキーによるログイン・再認証・認証情報のライフサイクルである。セキュリティ分野では、評価スイートのすべてのタスクにおいて、明示的なプロンプトなしにCSPやクロスオリジン分離ヘッダーを追加したモデルはなかったという。
Modern Web Guidanceは、npxコマンドで導入できるほか、エージェントのプラグインマーケットプレイスからも入手できる。
- 関連リンク
この記事は参考になりましたか?
- この記事の著者
-
CodeZine編集部(コードジンヘンシュウブ)
CodeZineは、株式会社翔泳社が運営する開発者のための情報メディアです。日々の開発に取り組むエンジニアやテクノロジーを学びたい方に向けて、プログラミングやAI活用、開発ツール、エンジニアの学びとキャリアに関する記事をお届けしています。
※プロフィールは、執筆時点、または直近の記事の寄稿時点での内容です
この記事は参考になりましたか?
この記事をシェア
