KnowAct-GUIClaw: самообучающаяся память и библиотека навыков для кросс-платформенных GUI-агентов

Harbin Institute of Technology

исследования официальный 1 ист. ~1 мин

KnowAct-GUIClaw представляет фреймворк Know-Route-Act-Reflect для GUI-агентов, который непрерывно накапливает опыт выполнения задач в хранилищах успешных и неудачных попыток и автоматически синтезирует переиспользуемые библиотеки навыков. Поддерживаются Android, iOS, HarmonyOS и Windows. Open source-вариант достигает 64,1% на MobileWorld, превосходя прежних закрытых агентов. Механизм переноса навыков даёт +8,5% на отложенной базовой модели.

Почему это важно

Демонстрирует, что самообучающаяся память для управления реальными устройствами на четырёх операционных системах может сократить разрыв с закрытыми моделями без переобучения весов. 36 голосов в HuggingFace Daily Papers.

Важность: 2/5

Кросс-платформенный GUI-агент с самообучающейся памятью; превосходит закрытые агенты на MobileWorld; 36 голосов на HF; подтверждено на arXiv

Источники

официальный arXiv:2607.12625 — KnowAct-GUIClaw