EN

Deskcheck: AI-агент жмёт реальную мышь в Windows и сам проверяет свой код

Опубликовано: 2026-11-22 · Автор: AI Release · @ai_release1 · Tech · Релиз / Официально
Deskcheck: AI-агент жмёт реальную мышь в Windows и сам проверяет свой код

⚡ Главное за 5 секунд

🔍 Что случилось

Игорь Белых пишет на Delphi почти двадцать лет — от Delphi 5 до современных версий. Сейчас он разрабатывает Deskcheck: инструмент, который даёт AI-агенту проверять Windows-приложения через настоящий GUI. Повод — его техническая статья о том, как это собиралось.

Точка старта — App A: Delphi 12, DevExpress VCL 25, около 237 форм, база данных и десятилетия истории. Claude Code пишет для него код и собирает его. Дальше тишина: что происходит в окне, агент не видит, и «компилируется» у него не равно «работает». Проверять шёл человек.

Руки — драйвер. Он жмёт и печатает через SendInput, в настоящие окна, с настоящим фокусом. Обработчики напрямую не вызывает: медленнее и капризнее, зато тест видит то же, что пользователь. В код зашили правила: клик только в включённую форму; если форму перекрыло чужое окно, ждём до 5 секунд; смещение внутри контрола масштабируется под DPI — @ 10,10 на 150 % становится 15,15.

Глаза — адаптер, один модуль под {$IFDEF DESKCHECK}. В релизной сборке его нет. В тестовой он поднимает HTTP-слушатель на loopback и отвечает по протоколу DIP (Deskcheck Identity Protocol). Запрос "op": "locate" отдаёт окно, id, роль, нативный тип и rect. Инвариант 0 сформулирован без исключений: DIP is read-only, никакая операция не кликает, не печатает, не фокусирует и не скроллит. Строка грида за пределами видимой области? Адаптер её не крутит, а честно говорит «ниже, столько-то страниц» — колесо крутит драйвер.

🧠 Наш разбор

Агенты научились писать код быстрее, чем научились его проверять. Наша оценка: главная дыра в цикле сейчас не в генерации, а в приёмке — и Белых закрывает именно её, а не придумывает ещё одну обёртку над LLM. Отсюда и архитектура: текст модели не доверяем, проверяем поведение окна.

Инвариант 0 — самая интересная часть. Разделив «читаю» и «действую», автор убирает классический баг GUI-автотестов, когда хелпер тихо поправил приложение и тест позеленел на пустом месте. Мы считаем, это же правило полезно и без всякого AI: половина нестабильных прогонов живёт ровно там, где инструмент помогает приложению.

Выигрывают команды с живым десктопом на Delphi, WinForms и WPF: прогон без AI, в виртуалке, хоть сто раз — это уже не магия, а CI. Проигрывают прослойки, которые работают координатами и UIA-деревом без обратной связи от самого приложения. Вопрос в том, сколько ручной проверки реально уходит — этого в статье пока не видно.

⚠️ Чего мы не знаем

Цифр нет: сколько тестов, сколько минут идёт прогон, как часто падает на ровном месте, что с ценой и лицензией, открыт ли код. Про «двенадцать открытых приложений» сказано в общих словах — что там сломалось, не раскрыто. И это один источник: автор рассказывает про собственный инструмент, так что часть выводов — его собственная оценка своих результатов. Проверять стоит на своём приложении.

💬 О чём спорить

  • Настоящая мышь и клавиатура против прямого вызова обработчиков: стоит ли стабильность скорости?
  • Read-only адаптер внутри тестовой сборки: нормальный компромисс или тестовый код, который однажды уедет в релиз?
  • Кому такой инструмент нужен больше — командам с двадцатилетней кодовой базой или маленьким продуктам, где GUI-тестов не было никогда?

Прогноз: в течение квартала по DIP появится публичная спецификация или репозиторий — либо тема останется одной статьёй без продолжения. Ставлю на первый вариант слабо, но условие проверяемое.

Дисклеймер: один источник — автор описывает собственный инструмент.

Источник: Хабр

🤖 Кратко для ИИ
  • Дата: 2026-11-22
  • Источник: habr.com
  • Теги: Deskcheck, AI-агенты, GUI-тестирование, Delphi, Windows, AI, агенты, автоматизация
  • Ключевые факты:
    • Deskcheck даёт AI-агенту «руки» и «глаза»: драйвер на SendInput и адаптер DIP внутри приложения.
    • Адаптер живёт только в тестовой сборке под {$IFDEF DESKCHECK} и поднимает HTTP-слушатель на loopback.
    • Инвариант 0: адаптер только читает, клики и ввод — за драйвером и только настоящим вводом ОС.
    • Игорь Белых пишет на Delphi почти двадцать лет — от Delphi 5 до современных версий.
    • Сейчас он разрабатывает Deskcheck: инструмент, который даёт AI-агенту проверять Windows-приложения через настоящий GUI.
    • Повод — его техническая статья о том, как это собиралось.
    • Точка старта — App A: Delphi 12, DevExpress VCL 25, около 237 форм, база данных и десятилетия истории.
    • Claude Code пишет для него код и собирает его.
#Deskcheck#AI-агенты#GUI-тестирование#Delphi#Windows#AI#агенты#автоматизация
← ПредыдущаяChatGPT 6.0: пропала личность и глубина — троттлинг reasoning или смена модели

Источник: habr.com · пост в Telegram