Photo AI Mentor — ChatGPT-клиент со сканированием фото
Заказчик: физ. лицо
Год: 2023
Мобильное приложение на Flutter, в котором ChatGPT работает вместе с распознаванием изображений. По идее это Photomath, только решает он не одни уравнения, а любые текстовые задачи. Пользователь фотографирует задачу из учебника, документ или вопрос, приложение распознаёт текст на снимке, отправляет его в нейросеть и показывает подробный ответ с решением. Вопрос можно задать и текстом, без фото.
Задача
В 2023 году ChatGPT был почти недоступен широкой аудитории в России. Приложение должно было дать к нему простой доступ через удобный мобильный интерфейс и закрыть задачи, с которыми не справляются решения вроде Photomath, умеющие работать только с математикой.
Сложности и решения
Похожих продуктов на рынке тогда не было, а в России о ChatGPT только начинали узнавать, поэтому опереться на готовые решения было нельзя и всё пришлось делать с нуля. Самой сложной частью оказалась цепочка «снимок → обрезка нужного фрагмента → извлечение текста → запрос в ChatGPT».
Возможности
• Съёмка задачи камерой и обрезка нужного фрагмента
• Автоматическое распознавание текста на фото
• Подробные ответы и пошаговые решения от ChatGPT
• Ручной ввод вопроса без фото
• Вход через аккаунт Google
Статус: приложение не вышло в сторы.
Стек: Flutter, Dart, Provider, Firebase, Camera, Dio, REST API, GraphQL, Hive, Intl, Google Sign-In
GitHub: https://github.com/QUSAD-prod/photo_ai_mentor
https://qusad-prod.tech/#project/chatgpt-client