Требуется разработать Windows-приложение (на C# или другом языке, предложенным разработчиком) для сопоставления списков URL с базами учетных данных (email:pass) на основе доменного имени. Программа должна обрабатывать сверхбольшие объемы данных (от 10 000 000 строк) без потери производительности.
Ключевой функционал:
1. Парсинг и нормализация: Извлечение доменов 2-3 уровня из сложных URL, фильтрация IP-адресов и неизвестных строк в отдельные логи. Приведение всех данных к нижнему регистру.
2. Архитектура БД: Реализация инкрементальной загрузки данных. При добавлении новых файлов (sources, creds, mails) программа должна мгновенно проверять уникальность и обновлять существующие записи в базе.
3. Модуль генерации (Macros/Custom): Создание производных пар по кастомным спискам и сложным макросам (замена символов a->@, s->$, регистры, удаление разделителей).
4. Гибкий экспорт: Конструктор формата вывода (выбор разделителей, лимиты строк на хост) и режим вывода только «актуальных» (новых) данных.
5. Интерфейс: GUI в темной теме. Стабильная работа под Windows.
Технические требования:
Оптимизация по памяти (RAM) при работе с файлами на 10 млн+ строк.
Многопоточность (UI не должен фризить во время обработки/генерации).
Высокая скорость дедупликации данных.
Опубликован 05.04.2026 в 14:30