Примеры работ и кейсы по направлению «Парсинг данных»

Десктопное Windows-приложение на Python/PySide6 для автоматического сбора данных с Wildberries по списку ID/SKU. Формирует отчёт в Excel: цены, СПП, рейтинги, наличие, продавец и другие параметры. Особенности: многоуровневый антидетект (Playwright Stealth, Patchright, Camoufox, curl_cffi с TLS-фингерпринтингом), ротация прокси из файла, решение капчи через Anti-Captcha/2Captcha/CapSolver с автопереключением, планировщик Cron, Telegram-уведомления, статистика и логи. Стек: Python, PySide6, Playwright, Patchright, Camoufox, curl_cffi, pandas, openpyxl, Anti-Captcha, CapSolver

Парсинг каталога на 3300 товаров с AJAX-характеристиками. Python (requests + BeautifulSoup). Результат: структурированный CSV-каталог для анализа цен конкурентов.

Realtime-парсер данных через Chrome DevTools Protocol (CDP): снимаю данные прямо из WebSocket-трафика браузера — без разбора HTML, из внутреннего канала площадки. Разобран бинарный протокол потока: коэффициенты, история раундов, события в реальном времени. Стек: Go (gorilla/websocket). Прокси: SOCKS5 с пробингом и автовыбором живых узлов. Устойчивость: staleness watchdog (нет данных → reload → рестарт через Docker), panic recovery в горутинах, liveness-проверка браузера с авторестартом. Работает автономно сутками. Подход переносим на любые источники: Циан, Островок, маркетплейсы — везде, где данные идут через WebSocket или закрытые JSON-ручки, а не через вёрстку.

Описание: Создана десктопная программа для управления показом изображений на отдельном экране или проекторе. Приложение позволяет загружать изображения, управлять очередью показа, выводить выбранный файл в эфир, переключать режимы отображения и работать с большим предпросмотром. Подходит для трансляций, презентаций, мероприятий и операторской работы. Что реализовано: — открытие файла или папки; — очередь показа изображений; — большой предпросмотр; — выбор экрана трансляции; — режим “в эфир”; — быстрые горячие клавиши; — переключение на чёрный, белый и тестовый экран; — настройка масштаба и перехода; — тёмный операторский интерфейс.

Описание: Разработано Android-приложение для быстрого перехода к настройкам мобильной сети и роуминга. Приложение помогает пользователю не искать нужные пункты в системных настройках: можно быстро перейти к режимам 4G/3G, ручному выбору оператора, настройкам роуминга и инструкции на случай проблем с SMS. Что реализовано: — быстрый переход к режимам 4G + 3G, только 4G и только 3G; — переход к ручному выбору оператора; — экран текущего состояния SIM и сети; — кнопка обновления состояния; — инструкция “SMS не приходит”; — переход к настройкам роуминга данных; — простой интерфейс для нетехнических пользователей; — подготовка APK/AAB и сборка через GitHub Actions.

Описание: Создана десктопная программа для хранения и быстрого копирования часто используемых команд. Приложение удобно для разработчиков и пользователей, которые часто работают с npm, Git, Node.js, Electron и командной строкой. Команды разложены по блокам, их можно быстро найти и скопировать без ручного набора. Что реализовано: — быстрый поиск команды; — группировка команд по разделам; — карточки команд; — копирование в один клик; — команды для сборки проекта; — команды Git; — тёмный интерфейс; — подготовка Windows-инсталлятора через npm run build.

Описание: Разработана десктопная программа для подготовки структурированных JSON-файлов по проектам, сезонам и сериям. Инструмент помогает автоматизировать ручное создание данных, собирать информацию по проекту, формировать общие файлы, проверять структуру и экспортировать готовые JSON-файлы для дальнейшего использования на сайте или во внутренней базе. Что реализовано: — работа с проектами, сезонами и сериями; — добавление проекта в общий список; — формирование файлов для главной страницы; — импорт и экспорт JSON; — предпросмотр и проверка данных; — счётчики проектов, сезонов и серий; — боковое меню разделов; — современный интерфейс десктопной программы.

Описание: Создана десктопная программа для удобной работы со скриптами и файлами проекта. Приложение позволяет открывать папку проекта, просматривать дерево файлов, редактировать скрипты во встроенном редакторе и сохранять изменения. Такой инструмент подходит для работы с userscript-скриптами, небольшими проектами, автоматизацией сайтов и локальными файлами. Что реализовано: — выбор папки проекта; — дерево файлов и папок; — поиск по проекту; — редактор кода; — вкладки открытых файлов; — сохранение изменений; — восстановление версий; — светлая и тёмная тема; — кастомный интерфейс десктопного приложения.

Описание: Разработано Android-приложение погоды с современным интерфейсом, прогнозом и настраиваемыми виджетами. Приложение показывает текущую погоду, полезные погодные показатели, почасовой прогноз и прогноз на несколько дней. Интерфейс адаптирован под мобильный экран, а виджеты позволяют быстро смотреть погоду прямо с рабочего стола. Что реализовано: — текущая погода по выбранному месту; — почасовой прогноз; — прогноз на несколько дней; — полезные показатели: восход, закат, UV, осадки, ветер; — виджеты для рабочего стола; — настройка отображения погоды; — аккуратный мобильный интерфейс; — подготовка проекта под APK/AAB и сборку через GitHub Actions.

Настроена и доработана инфраструктура VPN-сервиса с Telegram-ботом, личным кабинетом, подписками, партнёрской логикой, мониторингом и smart routing. Проект включал не только настройку VPN, но и сборку рабочей экосистемы для пользователей: бот, кабинет, авторизация, управление подписками, подключение клиентов, перенос пользователей и контроль состояния сервиса. Что реализовано: развертывание и настройка серверной части VPN-сервиса; подключение Telegram-бота для пользователей; запуск личного кабинета и Telegram Mini App; настройка доменов, HTTPS и reverse proxy; связка frontend-кабинета с backend API; настройка авторизации через Telegram; перенос пользователей и активных подписок в новую систему; настройка партнёрских заявок, статусов и комиссий; подключение мониторинга состояния сервиса; настройка smart routing для VPN-клиентов; разделение прямого и VPN-трафика для разных сайтов; работа с Docker-контейнерами, Caddy, Linux/VPS; диагностика проблем с сертификатами, проксированием, контейнерами, DNS и маршрутизацией. Проект показывает опыт в серверном администрировании, настройке backend-инфраструктуры, Telegram-интеграциях, reverse proxy, Docker и VPN/Xray-экосистеме. Стек: Linux, Docker, Caddy, Telegram Bot API, backend API, PostgreSQL, Xray/VPN, HTTPS, reverse proxy, VPS.