Mischief ускоряет генерацию видео в пять раз за счёт исследований живых нейронов
The Biological Computing Co. представила Mischief 1 — модель для создания видеороликов на основе изображений. Разработчики заявляют, что она генерирует видео примерно в пять раз быстрее исходной системы без заметного снижения качества.
В основе Mischief 1 лежит надстройка над моделью Alibaba Wan 2.2. Её разработке предшествовали четыре года исследований: специалисты выращивали нейроны из человеческих стволовых клеток и изучали, как они взаимодействуют и обрабатывают информацию. Полученные наблюдения затем преобразовали в программные методы оптимизации.
Живые нейроны не участвуют в генерации
Несмотря на биологическую основу исследований, сама модель работает без живых организмов. Нейроны использовались только в лабораторных экспериментах, а выявленные принципы были перенесены в программный слой. По данным компании, он увеличивает количество параметров исходной модели менее чем на 0,1%.
Таким образом, Mischief 1 не требует выращенных клеток для работы и не представляет собой гибридную систему с биологическими компонентами. Речь идёт о попытке дополнить традиционную математическую оптимизацию идеями, подсмотренными у живых нейронных сетей.
Заявленная стоимость генерации
Снижение вычислительных затрат должно сделать производство видеоконтента дешевле. Разработчики указывают, что пятисекундный ролик в разрешении 480p обходится примерно в 2,5 цента, а минута видео — около 30 центов. Для разрешения 720p стоимость пятисекундного ролика составляет около 5 центов.
Такое ускорение может быть особенно полезно создателям контента, которым приходится генерировать большое количество вариантов видео. Однако пока эффективность подхода подтверждена только данными самой The Biological Computing Co. Технический отчёт с подробным описанием метода и независимые результаты тестирования не представлены.
Планы The Biological Computing Co.
Компания намерена применять разработанный подход и в других областях искусственного интеллекта. Среди направлений дальнейшей работы называются языковые системы и управление физическими устройствами. По словам разработчиков, предварительные испытания на более новых видеомоделях также показали потенциал для дополнительного ускорения.
Партнёром The Biological Computing Co. выступает Amazon Web Services. Mischief 1 уже доступна для практического тестирования, однако окончательные выводы о преимуществах технологии можно будет сделать после публикации технических деталей и независимых сравнений с исходной моделью.
