На конференции CHIA 2024 был награжден робот, способный играть на пианино в дуэте с человеком, создавая гармоничное сопровождение в реальном времени. Работу представил Хуицзян Ван, аспирант Кембриджского университета.
Робот, получивший название «Harmony Robot», оснащен антропоморфной рукой, которая может играть аккорды в синхронности с мелодией, исполняемой человеком. Инновация заключается в использовании машинного обучения для предсказания аккордов, что позволяет роботу корректно реагировать на игру пианиста. Результаты экспериментов показали точность предсказания на уровне 93%, и робот успешно подбирает аккорды, основанные на поп-музыке.
Кроме того, для синхронизации с человеком был разработан специальный адаптивный контроллер, который позволяет роботу точно подстраиваться под темп игры. В результате получается настоящее музыкальное сотрудничество, где и человек, и робот играют как одно целое.
