音频音乐与计算机的交融-音频音乐技术
分享
课程详情
课程评价
spContent=《音频音乐与计算机的交融-音频音乐技术》这门课程面向一个新兴的文理融合的交叉研究领域,即音乐科技、音乐人工智能与计算机听觉。课程总体属于科普性质的通识教育课程,3个学分,总长824分钟,分16个教学周,选课学校可采用纯线上或线上线下混合式教学。本课程面向全社会开放,选课人员专业不限,年级不限,对爱好音乐,并具有初级乐理知识,以及高等数学、声学、信号处理、人工智能AI基础的听众效果更佳。课程教学团队由来自国内外的36名大学老师以及行业专家组成,每个人在自己演讲的章节均具有丰富的科研经验。
—— 课程团队
课程概述


    本课程对应于音乐科技、音乐人工智能、计算机听觉/AI声学这一新兴领域。一般以2000年建立的权威国际会议ISMIR(International Society of Music Information Retrieval Conference)作为学科起点。对于这种横跨文理又同时具有很大学术研究和实际应用价值的高门槛交叉学科,培养人才是一项艰巨又极其重要的任务,是促进整个学科发展的基石。


    国内由于长期的文理分割教育体制,导致这种交叉性人才极少。而欧美日本等发达国家由于其通识教育的理念,这种人才相对较多。在从硬件、软件、到音乐传播的整个音乐科技、音乐人工智能及计算机听觉/AI声学技术产业链占据了高端位置,每年从中国赚取大量利润。在国内,近年来随着文理交叉思维观念的加深,人工智能技术的火热,产业界对音乐科技、音乐人工智能及计算机听觉软硬件产品国产化需求的日益增加,对此类人才的需求量迅速增大。


    此前,国内在该领域的科研教学力量十分零散。自从2013年创建全国声音与音乐技术会议(CSMT)以来,才逐渐形成整体。课程负责人2017-2020年撰写了两篇分别基于Music和Audio的音乐科技及计算机听觉领域大型综述(共88页,734篇文献),主编“音频音乐与计算机的交融-音频音乐技术(上/下)”中文学术著作/教材,在百度百科定义“音乐科技”、“音乐人工智能”、“音乐信息检索MIR”、“计算机听觉”、“中国声音与音乐技术会议”等词条明确相关学科范畴。这些都为开设国内第一门该领域在线课程打下了良好的基础。


    在线课程建设的总体思路是:以科普形式的系列科技报告为主,面向全社会开放,使感兴趣的听众先对整个学科涉及的学术理论及产业应用等内容有一个全面的了解。对具体某个方向感兴趣的观众可以与相关导师合作科研进行深入理解。该学科的师资在国内分布于各个综合性大学、理工科大学及各大音乐学院,在任何单位集中授课均存在较大困难,在线课程的实施将有助于大大缓解这个问题。

授课目标

通过该在线课程的建设,预期具有如下成效:(1)加快奠定该新兴学科在国内的地位;(2)在全国至少20个大学和音乐学院开展教学,并面向全社会开放,培养至少500人以上的专业人才,促进全领域快速发展;(3)在该领域探索出一条适合中国国情的文理合作道路,争取再用十年时间从追赶达到欧美先进水平,甚至产生独特的引领作用(例如在中国传统音乐领域)。

课程大纲
预备知识

高等数学,大学物理,基础乐理,计算机基础

参考资料

Antonio Camurri, Giovanni De Poli, and Davide Rocchesso, "A Taxonomy for Sound and Music Computing", Computer Music Journal (CMJ), Vol. 19, No. 2, Summer 1995, pp. 4-5.


Shlomo Dubnov, "Computer Audition: An introduction and research survey", ACM Multimedia International Conference (ACM MM), Tutorial, October 2006, USA.


Michael J. Bianco, Peter Gerstoft, James Traer, Emma Ozanich, Marie A. Roch, Sharon Gannot, and Charles-Alban Deledalle,"Machine learning in acoustics: Theory and applications", The Journal of the Acoustical Society of America (JASA), Vol. 146, No. 5, November 2019, pp. 3590–3628.


《音频音乐与计算机的交融——音频音乐技术》,468页,ISBN:978-7-309-14769-8/J.416,895千字,复旦大学出版社,2019年12月。


《音频音乐与计算机的交融——音频音乐技术2》,421页,ISBN:978-7-309-15990-5/J.466,855千字,复旦大学出版社,2022年1月。


 “理解数字音乐-音乐信息检索技术综述”, 第五届全国声音与音乐技术会议(CSMT 2017), 复旦学报(自然科学版), 2018, 57(3): 271-313. (MIR领域中文综述, 43页, 335篇文献)


 “理解数字声音-基于普通音频的计算机听觉综述”, 第六届全国声音与音乐技术会议(CSMT 2018), 复旦学报(自然科学版), 2019, 58(3): 269-313. (计算机听觉领域中文综述, 45页, 399篇文献)


“音乐人工智能的研究进展与趋势”,CCF 2021-2022中国计算机科学技术发展报告,中国计算机学会文集,中国计算机学会编,机械工业出版社,2023.5, pp. 244-319.


百度百科词条:音乐科技、音乐人工智能、音乐信息检索MIR、计算机听觉、中国声音与音乐技术会议。