钢琴精灵

我们介绍钢琴精灵（Piano Genie），这是一款让非音乐家能够在钢琴上即兴创作的智能控制器。使用钢琴精灵时，用户在一个简单的八按钮界面上演奏，他们的表演会实时解码为逼真的钢琴音乐空间。为了学习适合该问题的映射过程，我们训练了具有离散瓶颈的循环神经网络自编码器：编码器学习与钢琴曲对应的适当按钮序列，解码器学习将该序列映射回原始曲目。表演期间，我们用用户的输入代替编码器输出，并在用户每次按下按钮时播放解码器的预测。为了提高钢琴精灵表演行为的直观性，我们对编码器的输出施加了音乐上有意义的约束。