По договоренности
Мы создаем AI продукт для анализа текстов (коментов в соц сетях и пр.)
Нам необходимо настроить под него сервер на GCloud.
Задачи:
- периодически создавать и настраивать новые инстансы по заданным нами параметрам.
- нормально настроить хранилище данных для хранения докер-образов, нейросетей и датасетов.
- наладить работу CI/CD – для версионирования нашего продукта и быстрого развёртывания её новых версий.
- проверять безопасность.
Первый кейс который нужно решить:
Для обработки датасетов нужно где-то 1 Тб жёсткого диска, и от 30 Гб оперативной памяти. мы сами пытались завести инстанс на GCloud, но он выдаёт ошибки о превышении лимитов.
Ещё вопрос – с ценами. GCloud инстанс с одними и теми же параметрами в разных зонах имеет очень большую вилку – 250 – 650 долл. в месяц. Нужно помочь разобраться чем они отличаются и какой лучше приобрести.
Другая проблема, которую тоже хотелось бы решить – ограничение на Youtube API. Сейчас Youtub отдает лимит в 10.000 запросов, но нам для скачивания комментариев нужно на несколько порядков больше: за один запрос можно скачать всего-лишь 100 комментариев. Необходимо чтобы помогли разобраться как увеличить лимит и сколько это будет стоить