deep audioviz experiments:深度学习驱动的音频可视化 源码

深度音频可视化实验 更新:我们的论文已经发表在Springer的Multimedia Tools and Applications中。 阅读 按照惯例,音频可视化是使用“数字信号处理”中的技术创建的。 该方法限于手动设计音频功能的能力。 我们通过在有监督和无监督学习设置中使用卷积深度神经网络体系结构来解决此问题,以从歌曲中提取特征,并探索几种将提取的音频特征映射到用于驱动音频可视化的视觉参数的技术。 我们已经证明了使用自动编码器生成与音乐动态且同步的可视化效果,并进一步探索了用于提高可视化效果质量的技术。 我们还表明,可以使用流派分类器创建随音乐流派而变化的可视化效果 (对不起,PlayGr