Задача: генерация звуковых композиций с помощью нейросетей
Ищем специалиста по аудио-нейросетям / цифровой обработке звука / генеративным моделям.
Что есть:
10 поющих чаш (5 терапевтических, 5 акустических).
У терапевтических чаш — 2 типа звуков: ударный и крутящий, у акустических — только ударный.
На проф. оборудовании записано много вариаций каждого типа звука (по ~5 вариантов на каждую чашу и каждый тип).
Уже есть алгоритм (на JavaScript), который генерирует формулу — последовательность звуков и их типов.
Есть примеры готовых звуковых композиций (собранных вручную звукорежиссёром).
Что нужно сделать:
Научиться программно собирать композицию по формуле: соединять звуки в онлайн-режиме.
Реализовать наложение звуков внахлёст (чаша звучит до полного затухания ревербераций).
Обеспечить вариативность: система должна выбирать разные варианты звуков (чтобы итог не звучал однообразно).
Сделать основу для дальнейшего развития: добавление других инструментов и аранжировок по тем же алгоритмам.
Требования к специалисту:
Опыт работы с аудио-нейросетями или генеративными моделями для звука.
Знание инструментов (PyTorch/TensorFlow, Jukebox, RAVE, Diffusion models, AudioLM или др.).
Навыки работы с Web Audio API / Node.js или аналогами (онлайн-генерация).
Понимание цифровой обработки звука (наложение, реверберация, нормализация).
Будет плюсом:
Опыт с музыкальными/терапевтическими инструментами.
Опыт создания интерактивных звуковых приложений.
Формат работы:
Первый этап: MVP (сборка композиций по формуле).
Далее: расширение на новые инструменты и сложные аранжировки.