Исследовательская группа из Стэнфордского университета представит статью о синтезе ловких движений рук с помощью физического моделирования на предстоящей конференции SIGGRAPH Asia 2024. Эта работа применима для задач требующих высокого уровня двусторонней координации и точного контроля.
В исследовании синтезированный виртуальный гитарист смог точно исполнять музыкальные произведения на которых он не был обучен. Авторы отказались от подхода обучения обеих рук как единого целого. Вместо этого они рассматривали каждую руку как независимого агента обучая их по отдельности перед тем как координировать их движения. Этот подход позволяет избежать прямого обучения политике в пространствах состояний действий высокой размерности что значительно повышает эффективность обучения.
Требования к данным для обучения в этом исследовании крайне строги. Для обеспечения естественных и физически правдоподобных движений исследовательская группа использовала технологию захвата движения NOKOV чтобы собрать данные выступлений профессиональных гитаристов предоставив высокоточные обучающие данные для виртуального гитариста.