УМ — автономный ИИ-агент: планирует, пишет код, управляет компьютером, говорит голосом

Ссылка на работу
image image image image image image image image
Собственная автономная инженерная система. УМ превращает поставленную цель в цепочку реальных действий на компьютере: исследование, создание файлов, сборка, запуск приложений, работа с окнами, проверка результата по экрану — и доводит длинные задачи до конца. Ключевое: • планировщик и управляющий контур держат многошаговые задачи, состояние сохраняется между итерациями, агент может остановиться с вопросом и продолжить; • адаптивные антицикловые контуры: анализ повторов, цепочек ошибок и отсутствия прогресса с несколькими уровнями эскалации стратегии; • управление компьютером: shell, процессы, мышь, клавиатура, окна, снимки экрана, OCR и компьютерное зрение для обратной связи; • единый маршрутизатор моделей: локальный Ollama и облачные провайдеры, учёт стоимости и токенов; • векторная память ChromaDB, голосовой ввод и синтез речи (Silero), живой голосовой диалог; • управляемая самомодификация: версионирование, изолированная проверка, откат. Стек: Python, Ollama, ChromaDB, mss/Pillow, PyAutoGUI, Tesseract OCR, Silero/PyTorch, SSH. Исходный код закрыт. Для вас: ИИ-агенты и автоматизация, агенты с управлением компьютером и браузером, голосовые ассистенты, RAG и память, интеграция LLM в рабочие процессы.
https://devastor.com/