Агенты ИИ становятся лучше в написании кода, просмотре веб-страниц и вызове API. Но есть одна поверхность, к которой большинство из них до сих пор не может прикоснуться: настоящий телефон. Это не симулятор, не скриншот, переданный модели, а настоящее устройство iOS или Android...
Агенты ИИ становятся лучше в написании кода, просмотре веб-страниц и вызове API. Но есть одна поверхность, к которой большинство из них до сих пор не может прикоснуться: настоящий телефон. Не симулятор, не скриншот, переданный модели — настоящее устройство iOS или Android, управляемое с точностью человеческих пальцев.
В этом руководстве показано, как предоставить агенту именно это через протокол модельного контекста (MCP). В конце концов ваш клиент MCP — Claude Desktop, Cursor, Cline или ваш собственный — сможет открыть настоящее устройство, нажать и ввести на нем текст, посмотреть, что делает приложение, захватывать и имитировать сетевой трафик, подделывать GPS и даже исследовать приложение и генерировать тестовые сценарии. Все это как инструменты MCP, которые агент может вызывать напрямую.
Что вы сможете сделать
После подключения агент имеет те же возможности, что и человек-тестировщик на реальном устройстве:
Управление — настоящие касания, нажатие и удержание, пролистывание, перетаскивание и ввод текста (собственный ввод на аппаратном уровне, а не наложение с задержкой при совместном использовании экрана)
См. — живые снимки экрана, веб-проверка на устройстве, дерево элементов пользовательского интерфейса / DOM.
Проверяйте сеть — фиксируйте каждый запрос, который делает приложение, и имитируйте любой запрос или ответ, чтобы вызвать состояния ошибок и крайние случаи.
Имитация — установка местоположения по GPS в любой точке земного шара
Автоматизировать — исследовать