tencent/ui-mate-27b

huggingface.co
Visit site

Tencent выложил открытых агентов, которые кликают мышкой вместо вас. UI-Mate смотрит на скриншот экрана, планирует по то

Tencent выложил открытых агентов, которые кликают мышкой вместо вас. UI-Mate смотрит на скриншот экрана, планирует по тому, что видит, и выдаёт действия мыши и клавиатуры в формате pyautogui . Лицензия Apache 2.0, есть версия на 27 миллиардов параметров и на 9, обе поверх Qwen. На OSWorld-Verified модель набрала 77,0 , на WindowsAgentArena 66,2, а свою базовую Qwen3.6-27B обгоняет на 17,7 пункта по строгому успеху. Все цифры от самого Tencent, независимых замеров пока нет. Главная идея в обучении с показа. Агенту один раз показывают, как делается похожая задача, он разбирает запись на подзадачи и дальше перепланирует уже по живому экрану. На наборе из 33 офисных задач одна такая демонстрация поднимает строгий успех с 17,2 до 35,4 процента. Запускается через vLLM. @neuro_channel

Specs

Type Tool
SectionAI agents
Site languageen

Found in sources

Similar in «AI agents»

Submit a site to the catalog

Just send the link — we will work out the rest.

We will review what you send and add it to the catalog if it fits.

Not sure how to implement it? We can help

Tell us about your task — we will pick the tools and suggest where to start.

0 / 5000
Verification code

Fields marked with an asterisk are required. Your data is used only to reply.