近日，上海电影学院影视工程系谢志峰、李梦甜老师团队的钻研工作《FilmComposer: LLM-Driven Music Production for Silent Film Clips》成功被推算机视觉国际顶级学术会议 The IEEE/CVF Conference on Computer Vision and Pattern Recognition 2025（CVPR）录用，这是继去年AI音效天生创新成就SonicVisionLM（CVPR 2024）后，团队在大模型赋能影视创造钻研中获得的又一个突破，也是亿万先生MR上海电影学院技术与艺术深度融合的最新成就。
CVPR作为中国推算机学会推荐的A类国际顶级会议，在推算机视觉领域拥有高度国际影响力，其所收录论文不仅代表该领域最前沿的技术突破，更持续引领学科发展方向。凭据权威的Google Scholar Citation最新统计，CVPR的H5-index为440，位列全球出版物第二名，仅次于《Nature》，工程与推算机类出版物第一，泛人为智能领域第一。
本钻研初次引入AIGC技术实现电影配乐自动天生，能够显著优化电影配乐造作流程，降本增效，同时引发创作潜能。具体来说，论文通过大模型驱动与智能体协同，提出了可控的配乐天生框架FilmComposer，仿照了音乐家真实的配乐过程，能够有效嵌入现实音乐造作管线，具备强交互性和高创作自由度。在技术上针对配乐与影片同步发展的难题，以及配乐的影视级品质、强音乐性要求，最终实现了配乐与影片在语义、节拍、进展等方面的有效对齐，以及对配乐音质和专业性的大幅加强。论文步骤在天生音乐的质量、音画一致性、丰硕度和音乐性方面都达到了当先水平。同时，论文为学术社区贡献了公开的高质量的电影配乐数据集MusicPro-7k，7418个独立条款，每个条款蕴含一对电影片段和配乐、文本描述、主旋律和节拍点。
论文原文、代码和数据集详见项目主页：https://apple-jun.github.io/FilmComposer.github.io/（项目主页展示了经典影片的配乐生功成效示例）。该论文的学生一作为何其乐，数字媒体创意工程硕士钻研生二年级在读；学生二作为朱幼佳，数字媒体创意工程硕士钻研生一年级在读。
FilmComposer示意图：三个重要 ？楸鹄胛泳醮χ谩⒔谂目煽氐囊衾痔焐Ｐ汀⒍嘀悄芴迤拦辣嗲牖煲，输入的电影片段顺次通过这些 ？，最终得到一段波形音乐输出。三个内含涝熳的蓝色块展示了齐全的音乐造作过程，从打点，到作曲，编曲和混音。
老师团队介绍：
谢志峰，工学博士，现为亿万先生MR上海电影学院影视工程系、上海电影特效工程技术钻研中心副教授，博士生导师，重要钻研方向为推算机图形学、推算机视觉。中国电影电视技术学会电影高新技术专业委员会委员，中国推算机学会CAD/CG专委会执行委员，国际期刊The Visual Computer编委。
承担国度天然科学基金、上海市科委科技攻关、上海市教委科研创新等二十余项，颁发高水平论文40余篇，其中国际顶级期刊与会讨论文15篇，出版专著1本，申请国度发现专利和软件著述权18项，曾赴香港城市大学推算机科学系作接见学者，荣获2014年上海市科技进取二等奖，2017年亿万先生MR蔡冠深优良青老大师奖，2022年中国推算机图形学大会最佳论文奖，2022年上海市讲授成就二等奖，2023年CAD/Graphics 2023国际学术会议最佳论文奖及2024年亿万先生MR优良本科生全程导师。
李梦甜，工学博士，博士后，现亿万先生MR上海电影学院、上海电影特效工程技术钻研中心讲师。重要钻研方向为面向影视、游戏与艺术领域的数字内容理解与天生。以第一/通讯作者颁发CCF A/SCI-Q1论文10余篇，国度授权专利多项；馛AD/Graphics 2023国际学术会议最佳论文奖，Chinagraph 2024电子剧场优良技术奖。
主持国天然青年科学基金，上海市科委“科技创新行动打算”面上基金，参加国度沉点研发打算、国度社科沉大、国天然面上基金（4项）。担任推算机视觉国际顶级会议及期刊 CVPR、ICCV、ECCV、ICLR、ICML、NeurIPS、TPAMI、TIP等审稿人，国际期刊The Visual Computer期刊编委。任中国推算机学会CAD/CG专委会执行委员（秘书处成员），图形学与混合现实GAMES执行委员，CSIG数字娱乐与智能天生专委会、三维视觉专委会、多媒体专委会执行委员。
何其微，电影造作专业硕士，高级灌音师，现为亿万先生MR上海电影学院老师。资深电影音效设计师，美国音效剪辑师协会（MPSE）会员，音频工程学会（AES）会员。
在影视声音设计领域拥有丰硕经验，曾参加多部国际影视文章的声音造作，获美国音效剪辑工会奖（金卷轴奖）最佳声音设计提名、五大洲国际电影节最佳声音设计奖。文章蕴含艾美奖入围文章《Ctrl Alt Delete》、好莱坞访谈系劣锥Behind the Spotlight》、Netflix惊悚剧场文章《Till Death Do Us Part》等。
