点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:推动生成式AI更好应用于声音类文艺创作
首页> 数字化频道> AI+ > 正文

推动生成式AI更好应用于声音类文艺创作

来源:经济参考报2024-09-06 13:07

  声音类产品作为文艺创作的重要表现形式,与生成式AI(人工智能)的结合为文艺创作带来了全新的可能性。通过生成式AI技术,声音类产品在音乐创作、语音合成有声读物、虚拟主播、影像音效制作等方面不断变革创新,为文艺创作提供了全新的创作手段和表达方式。生成式AI技术在文艺创作中的应用为声音类产品发展提供了新的机遇,但面临的风险与挑战也需积极应对和解决。

  生成式AI产品应用领域广泛

  AI音乐创作“风生水起”。生成式AI技术已经在音乐领域得到广泛应用,主要体现在分类识别(音乐检索、乐谱识别、音频识别)、生成(AI作曲、虚拟歌手)及传播(MIDI音响、教育)这三个方面。AI在音乐创作的不同阶段都发挥了较大作用。在创作初期,创作者运用AIGC汲取音乐素材以及创作灵感,同时对作品的音乐风格进行分析和预测,并进行音乐素材的智能检索和组织。在创作中期,AIGC技术为创作者的作品产出提供支撑,更好地辅助音乐创作,将音乐作品意图具像化。在创作后期,AIGC为雏形作品的后期制作提供强大的音频处理工具,从而使作品的后期制作更加准确、高效。尤其是某些AI编曲技术的出现,为音乐创作者带来更多灵感的同时,也使创作过程更加高效。

  AI虚拟主播走近大众。虚拟主播通过运用AI语音合成技术、自然语言处理技术、深度学习技术以及计算机视觉技术走进大众视野。语音合成技术通过先进的语音合成算法,模仿人类的声音,从而使虚拟主播能够流畅、自然地表达交流。计算机视觉技术在虚拟主播的形象呈现方面发挥着关键作用。通过3D建模和渲染技术,可以创建出高度逼真的虚拟人物。同时,通过面部捕捉和动作捕捉技术使虚拟主播能够实时模拟真人的表情和动作。情感计算技术可以分析观众的语言和行为,判断观众的情感状态,据此及时调整虚拟主播的回应方式及语气,进而赋予了虚拟主播在交互状态下的情感变化。

  AI配音应用广泛。AI配音技术通过对大量语音数据进行学习,能够模拟出不同人物、不同情绪的语音特点,为AI配音产品提供丰富的角色表现和情感表达。随着AI技术的发展,神经网络、深度学习等技术出现,“TTS+AI”(从文本到语音+人工智能)的组合使得电子合成语音自然性和准确性不断提高。针对情感起伏、声线多元、人声适配度等多样化需求,目前已有AI语音产品供应商提供“情感TTS”定制服务,通过调整语音语调、语速、停连、音高甚至模拟人类在不同心情下的语气变化,使电子合成语音能够更贴切地适应不同的语境和场景,赋予其更为丰富的“情感”表达。AI配音技术应用场景较为广泛,对众多行业发展都有促进意义。在电影、电视剧、动画等影视作品中,AI配音技术被用于生成角色的语音。通过模拟不同音色和语言,AI配音技术可以使角色声音更加自然、真实,提高观众的观看体验。该技术在有声读物和电子书领域也应用甚广,为用户提供更加自然、流畅的语音播报服务。AI配音也被应用在游戏领域,可以生成自然且更符合角色设定的声音,增强了游戏消费者的体验。

  生成式AI产品优势明显

  创作成本相对较低。随着人工智能技术的发展,AI技术开始尝试应用于智能声音设计,即自动根据影视内容及情感要求生成相应音效,这一应用大大降低了制作成本。一方面,节省了声音类产品制作的时间和人力资源。相较于传统产品,AI技术的应用可以快速生成出所需声音,并实现自动化操作,减少了创作过程所需的人力和时间。另一方面,传统声音类产品制作容易受到多种因素影响,例如创作者的状态、环境噪音、设备操作等,导致创作周期较长,而生成式AI技术应用到声音类产品创作中可以最大限度降低外界因素影响,实现成本最优化。

  素材处理精准高效。AI技术通过大量的数据学习,可以对音频素材进行识别、分类、整理,自动识别音频中如人声、音乐、音效等不同元素,并进行快速分类和整理,与人工相比大大提高了素材处理的质量,降低了数据处理的错误率。AI技术还可以对音频素材进行智能剪辑和拼接。此外,在音频处理过程中需要经过降噪、增减混响等特殊处理,人工处理可能存在个体偏差,而AI技术能最大限度降低错误出现的概率。

  生成内容多元新颖。随着社会发展,人们对声音类产品的需求更加多元化、个性化。针对此现状,生成式AI可以帮助创作者在广告配音、音乐制作、虚拟角色声音等多领域的创作中打破固有思维限制,提供新颖的创作思路。不仅如此,AI能够通过分析用户的喜好、习惯和交互数据,了解用户对声音产品如音色、语气、语调等方面的具体需求,为创作者个性化创作提供实际支撑。

  生成式AI产品发展存在的风险与挑战

  权益问题存在争议。声音类产品涉及数据侵权风险、版权主体的权益以及个人隐私和人格权等问题。AIGC创作模型大多是由庞大的样本训练而成的,对模型选取的素材进行反向溯源难以实现,而采用的素材可能未经作者授权。不仅如此,生成式AI的使用者可以在生成的产品上进行二度创作,新产品版权的归属问题也难以确认。AI在生成部分声音类产品时,如使用到未经公开发布的普通人的声音,这类声音属于个人隐私信息,在公开发布时可能存在暴露隐私的风险,这将对个人隐私权和人格权造成侵犯。在当前发展阶段,AIGC从组合型内容创造转向探索型甚至变革型内容创造,其创作过程中的权益收益以及可能导致的侵权责任如何划分,目前也处于争论之中。

  艺术规范问题存在争议。声音类AI产品涉及音乐、播音主持等艺术类学科,这些学科在其专业领域也有一定的专业规范和艺术化处理方式,而声音类AI产品在是否符合专业的艺术规范方面存在争议。以播音主持专业为例,在不同语境下朗读时,同一句话所表达的语气、情感、停连、重音都是不同的,说话时停连、重音的位置变化也会影响意思表达。但目前,生成式AI在配音时不能根据文本内容识别具体的语境,同一声音在不同语境下朗读方式区别不大。在情感处理方面,AI与真人相比表达较为生硬,没有情感起伏。因此,在实际应用中,声音类AIGC产品在艺术规范方面的问题也值得深思。

  生成式AI产品对创作者的启示

  创作者应不断提升自身能力。生成式AI技术可以实现一键生成,一些简单重复的工作不再需要人工完成,这就使一些创作者面临失业风险。当然,声音类AI产品存在的固有问题也使优秀创作者的地位不可撼动。例如,AI虚拟主播能够通过“克隆”方式模仿规范的普通话和特定音色,但究其根本也只能模仿声音的外在形式。实际上,优秀的主播需要在不同情境下采用不同的播报方式,通过语气、语调、停连等的变化来表达不同的情感状态。这就要求创作者们不断提高自身技术水平,提高专业能力,综合学习多领域知识,丰富自己的阅历,扩大自己的优势,从容面对AI产品发展对创作者产生的冲击。

  创作者应合理利用AI技术。AIGC技术发展到现阶段,其在为创作者提供创作灵感、降低创作成本、提高作品产出效率、提升作品质量等方面具有一定的优势。因此,创作者要主动了解和学习AIGC技术,不能一味地肯定或者抵制,而是要将自身需要与AI技术相结合,掌握在AI技术运用当中的主动权,使其成为辅助作品创作的得力助手,实现自身与AI技术双向融合发展。同时,因AIGC的使用规范问题还存在争议,创作者要提高自身法律意识,及时了解AIGC相关法律法规,使AI技术能够在合理规范的情况下辅助自身创作,提高作品质量,产出更优秀的声音类产品。

  随着AIGC技术的发展,其在声音类产品方面的应用已经占据了一定的位置。其不仅能模拟出接近人类的声音,直接生成声音产品,而且可以辅助创作者进行创作,为创作者提供全新的工具和独特的表达方式。但同时,生成式AI技术在声音类文艺创作应用中仍面临诸多挑战,我们要在抓住机遇的同时正视存在的问题,并在实践中努力加以改进,让生成式AI技术得到更好更广泛的应用。

  (作者:王一然 作者单位:苏州大学传媒学院)

[ 责编:孔繁鑫 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 习近平同巴西总统卢拉共同签署联合声明

  • 习近平同巴西总统卢拉共见记者

独家策划

推荐阅读
11月12日至13日,浏阳市委常委、组织部部长、市家居建材产业链链长唐安石带队,市人大常委会党组副书记、副主任、市家居建材产业链副链长张葵红,市人民政府党组成员、副市长、市家居建材产业链副链长谢波等同志参加,赴广东省佛山市开展家居建材产业链招商考察活动。
2024-11-15 17:20
2024年11月12日,江苏省苏州市荷塘月色湿地公园内向日葵竞相绽放,吸引众多游客前来观赏,乐享秋日美景
2024-11-13 15:29
2024年11月12日,湖南省怀化市通道侗族自治县双江镇的烂阳村,山林色彩斑斓,红叶似火,黄叶如金,松柏常青,宛如大自然的调色盘
2024-11-13 15:28
南泥湾是中国军垦、农垦事业的发祥地,是“自力更生、艰苦奋斗”创业精神的发源地。
2024-10-27 17:37
延安地区拥有丰富的煤炭资源,在采矿井约40家,年开采量约5000万吨,但煤质坚硬、自动化程度低等难题严重制约着煤炭产业的发展。
2024-10-27 17:18
近日,在陕西延安举行的“弘扬延安精神,奋进伟大时代” 网上主题宣传系列访谈中,洛川青怡庄园生物科技有限公司副总裁肖小杰介绍,他们企业的苹果按个卖,一个可以卖到10元。
2024-10-25 18:49
堆积起来的生菌木材冒着热气儿,菌种生产厂房里机器轰鸣,滑子菇大棚里农民忙着收“金疙瘩”。
2024-10-25 18:43
你以为的农村是雨天泥泞,还是道路整洁?爬高上低,还是风景无限?高家原则将山体沟道治理作为城市有机更新和创建文明典范城市抓手,让山体沟道,环境大改善。
2024-10-24 18:11
近日,在陕西延安举行的“弘扬延安精神,奋进伟大时代” 网上主题宣传系列访谈中,延安大学经济与管理学院副教授、数字经济专业负责人王珊珊介绍,从卖苹果到卖服务,这是数字技术非常好的一个创新,和产业结合的非常有深度。通过消费者与大自然以及果树的亲密视觉接触,可以提升他们的体验感,增加对苹果这种产品的客户粘性和客户忠诚度。
2024-10-24 18:08
当陕北说书遇到延安美食,碰撞出延安独特的人文魅力。
2024-10-24 18:06
激昂的旋律回荡在空气中,豪迈的歌声飞扬于天地间。壮丽的情怀澎湃在心田里,不朽的精神传承于岁月中……
2024-10-24 17:59
小孩哥小孩姐把安塞腰鼓课间操跳得超燃!
2024-10-24 17:59
青山环绕、绿水蜿蜒,这是吴起南沟村给记者们留下的第一印象。谁能想到,这个位于陕西省延安市吴起县的小村庄,曾经风沙肆虐、植被稀疏。经过二十多年艰辛努力,光秃秃的黄土高坡绿意盎然。
2024-10-24 17:50
在宝塔区河庄坪镇政府的扶持下,延安菌舰生物科技有限公司采用“企业+合作社+农民”模式,带动400余人家门口就业,人均增收2000元。食用菌产业的蓬勃发展,不仅为农民带来稳定收入,更为乡村振兴注入活力。点赞延安菌舰,为农民增收,为乡村添彩!
2024-10-24 17:48
10月23日,“弘扬延安精神 奋进伟大时代”网上主题宣传媒体团来到了延安新材料产业园,亲身体验石墨烯发热背心,感受科技的温暖拥抱。
2024-10-24 11:18
近期,延安市薛张小流域水土保持项目碳汇交易成功!这不仅是一次生态保护与经济发展的双赢,更为延安乡村振兴注入了新的活力!
2024-10-24 11:16
10月22日,“弘扬延安精神 奋进伟大时代”网上主题宣传媒体团来到了位于延安市安塞区南沟村的苹果基地,在这里记者们亲身体验苹果采摘,倾听果农的心声。同时,记者团还开展了一场特别的直播带货活动,助力果农销售苹果。此次活动不仅展现了果农的辛勤付出,也让更多人了解到延安苹果的魅力,为乡村振兴贡献了一份力量。
2024-10-24 11:07
10月23日,“弘扬延安精神 奋进伟大时代”网上主题宣传“逐梦之路”媒体采访团走进延安宜川县,追寻“悬崖造林队”的故事。
2024-10-24 10:27
陕北说书最近火爆出圈,董宇辉在直播中表示向往陕北文化,想成为一个陕北说书人。这一段陕北说书,带你行走在延安的绿水青山间。
2024-10-24 10:21
近日,在陕西延安举行的“弘扬延安精神,奋进伟大时代” 网上主题宣传系列访谈中,延安数据(集团)有限责任公司董事长高延宏介绍,延安的地域特点适宜建立算力中心,要把平台搭建好,把更多的企业引到延安,建立归属在延安的算力中心,更好的服务延安、服务陕西。
2024-10-24 10:18
加载更多