GUI エージェント(画面操作)
📌 計画プレースホルダーページ:このページは「GUI エージェント(画面操作)——知覚とアクション空間、検証ループ、サンドボックスと安全対策、評価ベンチマークと能力の限界」のために確保されており、コンテンツは学習に合わせて徐々に埋めていきます。
収録予定
- [ ] 三種の自動化:スクリプト、GUI エージェント、RPA とそれぞれの使いどころ
- [ ] 知覚:スクリーンショット、アクセシビリティツリー、Set-of-Mark、ハイブリッド
- [ ] アクション空間と検証ループ(終状態はプログラムで検証する)
- [ ] サンドボックスとセキュリティ:プロンプトインジェクション、資格情報、アクション分類、監査
- [ ] ベンチマーク、自作評価セットと能力の限界
次のステップ
- [ ] 分野概要の計画リストに照らして、本ページを項目ごとに充実させる
- [ ] 各項目に実行可能な例と失敗記録を追加する
- [ ] 完了したら「計画中」の状態を「収録済み」に変更する
執筆規約は分野概要を参照してください。