Заказчик
Заказчик nw855 | FL.RU

Заказчик

На сайте 8 лет и 3 месяца (заходил 2 года 9 месяцев 25 дней назад)
0
24
Рейтинг
24
Все (1)       Заказы (1)        Вакансии (0)       Конкурсы (0)
Разместить заказ
01 Сентября 2016
По договоренности
Описание задачи.
Исходные данные:
1. Есть несколько десятков первичных источников – выгрузок данных (ссылок) в формате XML1.0/YML. Набор полей (тегов) в каждой выгрузке фиксированый. Количество записей в отдельной выгрузке может достигать больше миллиона. Объем каждого файла может достигать более 1 ГБ.
2. Есть формализованный формат XML 2.0 (набор полей-тегов и их последовательность фиксированы), в котором необходимо предоставить данные для последующей выгрузке данных для другого источника. Выходные данные должны быть ограничены по числу записей, т.е. выходные файлы должны быть разбиты на соответствующее количество файлов.
3. Необходимо конвертировать данные из п.1 в файлы формата согл. п.2. В том числе требуется вычислять контрольные суммы (MD5) для файлов, ссылки на которые преобразуются из п.1 в п.2. Контрольные суммы также публикуются в выходных файлах.
При этом, необходимо иметь возможность добавлять произвольные источники первичных данных, фиксировать соответствия полей (тегов).

В идеале, схема должна работать следующим образом:

1. В установленное время (по расписанию) происходит автоматическое получение (загрузка) первичных данных из указанных источников. Возможно с использованием API.
2. Производится конвертация в нужный формат на основании формализованной схемы конвертации (соответствия полей), при этом происходит вычисление контрольной суммы (MD5) для файлов, ссылки на которые есть в структуре данных. Также добавляются необходимые блоки данных (теги). Выходные данные сохраняются в файлы необходимого объема и выгружаются по FTP.

3. В случае необходимости производится добавление/изменение источников. Указывается ссылка на источник. Составляется и прописывается схема конвертации (схема соответствия полей-тегов), указываются параметры выходных файлов (объем данных в каждом файле), схема присвоения имен файлов, адрес для загрузки файла.

Нужен user-friendly интерфейс.
Ждем предложений с указанием предполагаемых сроков выполнения и стоимости.

Прошло времени с момента публикации: 8 лет 3 месяца 10 дней 13 часов 9 минут
Раздел: Программирование / Плагины/Сценарии/Утилиты

Наши партнеры
Сведения об ООО «Ваан» внесены в реестр аккредитованных организаций, осуществляющих деятельность в области информационных технологий. ООО «Ваан» осуществляет деятельность, связанную с использованием информационных технологий, по разработке компьютерного программного обеспечения, предоставлению доступа к программе для ЭВМ и является правообладателем программы для ЭВМ «Платформа FL.ru (версия 2.0)».