Нейросеть научилась предсказывать движения рук музыканта.
Разработчики из Facebook представили алгоритм на нейросетях, который при прослушивании скрипичных и клавишных композиций имитирует движения рук музыканта в дополненной реальности.
В итоге система обучилась находить взаимосвязь между характеристиками звука и движениями рук музыканта, строить предсказания и воссоздавать движения в дополненной реальности.
Использование
По мнению создателей технологии, в будущем она облегчит обучение игре на музыкальных инструментах. Например, имитация в VR поможет ученику рассмотреть движения профессионала с разных ракурсов.
Нейросети все чаще используются не только в IT-сфере, но и в бытовых ситуациях. В июне 2018 года Google представила алгоритм на нейронных сетях Medical Brain, который по состоянию пациента предсказывает срок его пребывания в больнице, а также вероятность повторной госпитализации и смерти.