Плата за $7 — и ИИ сам тапает по твоему айфону. Без Mac и без джейлбрейка

Смотри, какая штука. Агенты уже умеют кликать по сайтам за тебя. А вот твой айфон до сих пор был для них закрыт. Чтобы ИИ потыкал в приложения на iPhone, нужны были Mac, Xcode, аккаунт разработчика и специальное приложение-помощник. Подпись у бесплатного аккаунта ещё и слетает каждые 7 дней.

11 октября 2026 на GitHub появился ESP32 iPhone Agent — и он обходит всё это хитростью. Агент управляет телефоном так же, как человек: смотрит на экран и двигает указатель. Нужна только плата за 7 долларов.

Почему это только что стало просто

Трюк из трёх частей, и каждая — обычная, бытовая:

• Глаза — AirPlay. Айфон показывает свой экран на компьютер, как на телевизор. Программа UxPlay ловит картинку, и агент видит кадры.
• Руки — плата ESP32-S3. Её втыкают в разъём телефона, и айфон думает, что это мышка с клавиатурой. Включаешь «AssistiveTouch» — появляется круглый указатель. Клик мышью — это тап, протяжка — свайп.
• Мозг — любая модель с «зрением». Подойдёт любая, у которой есть OpenAI-совместимый API и которая понимает картинки: облачная или твоя локальная.

Модель смотрит на скриншот и решает: «тапни сюда», «свайпни вниз», «на главный экран». Плата исполняет. Перед тапом агент сам находит указатель на экране и поправляет промах. После шага проверяет, что экран правда изменился.

Ничего не ставится на телефон. Не нужен Mac — хватит и Linux. И раз агент видит только пиксели, он работает в любом приложении, даже в играх.

Что собираем

Своего «помощника с руками» для твоего же телефона. Ты пишешь цель на сайте у себя на компьютере — а указатель сам ползёт по экрану айфона, открывает приложения и жмёт кнопки.

Лучший старт — скучная рутина, которую ты делаешь руками каждый день: включить нужный фокус-режим, найти настройку в глубине меню, пролистать одно и то же приложение.

Чему научишься

• Как устроен агент изнутри. Тут всё видно: план, мысль, действие, скриншот каждого шага с нарисованным тапом. Лучше любой схемы на слайде.
• Цикл «посмотрел → сделал → проверил». Агент не верит себе на слово, а проверяет, изменился ли экран. На этом держатся все надёжные агенты.
• Первое железо. Прошить плату и увидеть, как она «стала мышкой», — это магия, которую раньше обходили стороной.
• Как писать задачу агенту. Цель, границы и момент «готово» — тот же навык, что и с любым ИИ.

Готовый стартовый промпт

Есть два промпта. Первый — для установки: вставь его в Claude Code или Codex на компьютере, к которому подключена плата. Его советует сам автор:

Clone https://github.com/onehumanbeing/esp32-iphone-agent and follow its README to set it up on this machine:
flash the ESP32-S3 plugged in over USB, install UxPlay and the server, write server/.env for my model API, start
the server and give me the web UI address. Ask me for the Wi-Fi name/password and the model API key.

Второй — сама задача для агента. Главная ошибка — «сделай что-нибудь полезное». Агент начнёт бродить по телефону. Сильная задача задаёт маршрут, границы и что считать готовым.

Слабый промпт — это «гуляй где хочешь». Сильный — маршрут из шагов, запретные зоны и условие остановки. «Ничего не печатай» тут не прихоть: плата пока печатает только латиницей, русский текст она не наберёт.

Что получится

Через выходные у тебя на компьютере открыт сайт: слева живой экран айфона, справа лог мыслей агента. Ты нажимаешь «Старт» — и указатель сам ползёт по телефону. Под этим растёт «стена шагов»: скриншот каждого решения, тап отмечен красным кругом, свайп — жёлтой линией.

Сними это на видео: телефон лежит на столе, никто его не трогает, а он сам листает и включает. Такое точно захочется показать.

Трезво про рамки:

• Нужен Mac или Linux. Компьютер и айфон — в одной сети Wi-Fi, причём 2,4 ГГц для платы.
• Lightning-айфонам нужен переходник. Модели с USB-C подключают плату напрямую. Старым айфонам нужен адаптер Lightning — USB для камеры.
• У платы XIAO нет своей антенны. Прикрути ту, что идёт в комплекте, иначе Wi-Fi будет отваливаться.
• Заблокированный телефон не слушается. На блокировке разъём засыпает. Держи экран включённым.
• Облачная модель стоит денег за каждый шаг. Каждый шаг — это картинка в модель. Короткие задачи дешёвые, долгие прогулки по телефону — нет.
• Не пускай агента в деньги. Он видит пиксели и может промахнуться. Банк, покупки и переписку ему не доверяй. Кнопка «Стоп» (или Esc) останавливает его мгновенно.

План на выходные

1. Пятница, вечер. Закажи или найди плату Seeed XIAO ESP32S3 (около 7 долларов) с антенной. Скачай проект и включи на айфоне «AssistiveTouch»: Настройки → Универсальный доступ → Касание.
2. Суббота. Вставь установочный промпт в Claude Code — он прошьёт плату, поставит UxPlay и сервер и спросит ключ модели. Воткни плату в айфон, включи «Повтор экрана» → «iPhone Agent» и нажми «Calibrate». Момент «ого» — когда агент впервые сам находит указатель на экране.
3. Воскресенье. Дай агенту свою утреннюю рутину по сильному промпту. Посмотри на «стену шагов»: где он промахнулся и как исправился. Сними видео «телефон сам всё включил» — и поделись.

Начни с одной скучной вещи, которую делаешь каждое утро. Когда твой же телефон впервые сам делает её за тебя, агенты перестают быть абстракцией.

Источник: ESP32 iPhone Agent на GitHub