发布日期: 2024-11-26
林云川,上海播送电视台、上海文明播送影视集团有限公司技艺核心主任,上海东方 传媒技艺有限公司总司理,上海市播送科学咨询所所长,教诲级高工,中邦影戏电视 技艺学会第九届理事会常务理事,上海市影戏电视技艺学会副理事长,上海市播送电 视协会理事,上海大学影戏学院特聘教诲。2018年入选“SMG首届领武士才”、2019年被评为中宣部文明名家暨“四个一批”、邦度“万人安顿”玄学社会科学领武士才,2021 年荣获“上海都邑化转型领军前锋”,2022年荣获上海市文明企业十大年度人物。
SMG 正在众年前就开首闭心和咨询 AI 正在媒体范围的操纵, 获批设立了“灵敏媒体例播操纵邦度播送电视总局核心实行室”,并入选“上海市第二批人工智能试点操纵场景”。行为头部主流媒体企业,已开头已毕将 AI 技艺连合媒体生意场景操纵,变成面向行业的智能媒体数字底座管理计划。近年来, 着重打制媒体范围的天生式大模子(以下简称“AIGC”)本事, 促进主流媒体由“AI 赋能调解分娩”进阶为“AI 赋能内容创作”、从“单点操纵”到“全财产链打通”的举座本事晋升。
跟着算计机科学技艺的急迅生长,如今墟市上的各式通用性、底子性的AI本事生长已较为成熟。媒体行业通过引入AI 技艺,升高内容创制、播出、分发和构造化的效能和质料, 促进调解媒体转型以及财产升级。
正在媒体内容分娩流程中,通过连合语音识别、语音合成、 人脸识别、图像识别、智能翻译、智能剪辑等AI 本事,修筑媒体内容分娩全流程管理计划,更正守旧的内容分娩形式, 大幅晋升内容创制全流程分娩的效能,晋升用户体验。
通过AI 技艺与虚拟创制技艺相连合,变成以虚拟数字人工IP的内容产物立异。近年来,媒体行业内越来越众的数字人被公众所熟知。目前,从重心到地方媒体,引入虚拟主播 也成为媒体内容立异的紧要形式。越来越众的虚拟主播粉碎守旧的节目形式,连合互联网 IP 运营办法破圈、引流,将守旧内容给予新的人命力和代价。
AI 技艺为内容散布带来改良,连合云算计、大数据等技艺,更正人工及粗放式散布、投放形式,正在保护高质料内容安静播出的同时,晋升内容触达真实凿性。
依照差异的播出分发场景,连合敏锐音讯识别、图像识别、信号传输监测等技艺供给智能审核及播出控驯服务。以此达成对直播和录播节目内容、传输视音频信号实行及时监测、 预警以及内容的技审说明,实时出现并打点分外情形,确保节主意安静性、确凿性和纯净性。
基于新媒体内容特征,通过智能内容举荐、发现数据等大数据连合 AI 技艺的主动化数据供职作战,更正内容与用户的连合办法,达成数据赋能媒体生意发生代价。智能内容举荐,依照搜罗的数据和用户的画像,发现千人千面的内容,从新界说媒体内容触达形式,从而晋升内容分发的成就。
基于众模态AI算法对音视频内容实行构造化说明,通过对视频、语音、图像、文本的识别、明确,提取内容构造化标签, 达成智能编倾向签,以应对海量媒体数字资产的构造化拘束,便于撙节人力并充足发现数字资产潜正在代价。
基于文本、图片、视频、音频差异素材众模态的检索本事,晋升媒资用户的检索效能。通过图像识别、人脸识别、OCR 识别以及调解语音识别、视频特点提取等底子本事,连合语义说明算法、词向量算法等,升高媒资智能检索本事,支柱急迅定位用户所需的素材音讯,晋升用户内容盘问的体验。
SMG 自2017年起开首咨询 AI 正在媒体范围的操纵,创制 AI 实行室,饱动 AI 正在播送电视融媒体转型中的落地操纵,协议举座生长战略 :整合 AI 各大厂的通用上风本事并加以集成,连合媒体调解各业态特征,自立研发各式 AI 算法和操纵用具,适配于媒体散布全链道。
经历数年作战,SMG 已具备了二次开荒 AI 通用本事和自立研发 AI 算法的本事,已将智能本事深度嵌入分娩流程, 升高泛化、无沾染体验,同时作战智能本事的资源优化和集约化,晋升资源的改变、拘束、迭代等本事。
基于生长战略,以通过 AI 技艺赋能媒体“采、编、播、存、 发、数据”各个闭头行为中央倾向。依托媒体内容数字化生 产平台,渐渐将 AI 技艺连合媒体生意场景操纵于内容创制中台、播控分发核心、灵敏媒资核心、数据核心等,变成面向媒体行业的智能媒体数字底座。
智能媒体数字底座(如图 1 所示)是由操纵层、本事层 和底子办法层所组成的人工智能赋能媒体三层架构,也许更好地赋能文明媒体行业,达成降本增效。
SMG 正在增加并拓展媒体分娩范围原有操纵的同时,着重 打制媒体范围的 AIGC 本事,促进主流媒体由“AI 赋能调解 分娩”进阶为“AI 赋能内容创作”、从“单点操纵”到“全 财产链打通”的举座本事晋升。
主动写稿,撰写音信稿正文、题目、摘要和症结词。音信编辑仅需一键上传外采音频、视频以及音信文本素材,无需其他操作,即可达成大模子正在短短数秒内主动天生音信初稿。主动写稿体系通过语音识别、语义明确提取音讯,基于音信专业内容演练的专业垂类模子对音讯实行言语的从新结构和规整。同时,通过大模子的内容概括总结本事,助助音信编辑总结摘要,提取症结词,天生各样派头的题目,满意各渠道内容宣布的央求,变成全套音信稿分娩供职。音信编辑可按需改正或从新天生音信稿,完全的改正内容都将被体系存储,并用于该垂域模子的调优,以此变成囊括内容天生、素材征采和模子调优的闭环。
借助 AIGC 重大的图片天生本事,满意演播室大批闲居音信专题布景图的急迅创制需求;基于大模子的众模态天生本事,去除图片中指定的人物或水印,而且达成将静态图片天生动画,从而淘汰后期创制的反复性劳动,晋升效能和质料。
大模子辅助音信疾编。依照编辑供给的剪辑摘要,急迅识别、剪辑原视频素材中的镜头片断。体系行使大模子跨模态本事以及 NLP 语义明确技艺,助助编辑识别所需的镜头, 并天生对应的字幕,达成关于海量视频节目内容的急迅剪辑。从而应对网端新媒体内容分娩的特征,撙节内容的创制时候和本钱。别的,正正在咨询文本天生视频模子Sora与媒体内容分娩 之间的落地操纵。
跟着元宇宙与媒体行业的连合,3D内容创制办法的生长已成为趋向。基于 NeRF技艺和文生3D模子,可大幅低落创作家 3D 筑模本事。通过文本描画和少量图片素材, 即可已毕纷乱的3D筑模,显然晋升3D筑模效能,可操纵于虚拟赛事、虚拟综艺、动画音信等创制、播退场景。
数字人行为元宇宙中另一紧张赛道,贸易形式也取得飞速生长。各主流媒体也纷纷打制数字主播 IP,拓展墟市机会。通过 AIGC 深度模子演练,驱动面部脸色、肢体手脚,变成AI 驱动的智能数字人。连合天生式对话模子,可给予数字人与用户自正在对话的本事,以拓展更众的贸易场景和形式。SMG 的虚拟音信主播申 雅(如图2所示)正聚积 AIGC 技艺, 进化交互本事,晋升IP代价。
大模子升级探索本事,达成对音视频更广泛的探索形式。通过 AIGC的跨模态本事关于媒资素材图像画面的识别,修筑向量库,晋升标签的密度和精准度;修筑众重检索排序算法,整合文本、向量检索结果和用户行动数据, 晋升用户媒资检索的效能和质料。该本事修筑后,用户可能通过自然言语的办法检索素材场景片断,通过更正症结词探索办法,晋升用户的体验。
“SMG 云”接续扩充 GPU 算力、周围算计等本事、高功能算计资源池以及数据库供职资源池,以便维持AIGC 技艺 正在媒体内容缔造场景的拓展。
跟着越来越众的天生式大模子渐渐操纵于媒体行业,正在带来创再生产形式的同时,也激励新的题目。即何如紧贴文明媒体内容分娩播出全流程场景输出本事,以及何如确保AIGC 所分娩内容质料真实凿性和行业闭系性。
针对以上题目,SMG 正修筑媒体行业 AIGC 本事平台,正在低落 AIGC 内容分娩的门槛、晋升分娩效能、 促进立异内容连续及时提供的同时,也管理了通用大模子无 法天生紧贴媒体分娩场景的痛点。即媒体内容 + 通用大模子 + 笔直小模子自训 + 模范化输出 + 算力 = 本事平台 + 行业专业 笔直大模子。也便是行使自有媒体范围资源积聚和操纵场景上风,连合大模子,修筑 AI 媒体垂域模子平台,演练专业 AIGC 本事,支柱原有内容分娩全链道嵌入、调优,也支柱产物化的本事输出。
从财产生长来说,依托媒体行业 AIGC 本事平台,团结高校 AI 实行室以及行业中的上下逛机构变成密切的合营闭 系,整合媒体各范围内容数据,物色“产学研用”共投、共筑、 共享等众元机制,激动财产人才活动、促进参加闭系行业标 准的作战,促进媒体全财产链打通和升级。
当前,AIGC仍然全方位渗入媒体分娩各闭头。通过与媒体场景的深度耦合,低落内容分娩的门槛,重塑文明媒体 分娩形式,鼓动财产链生态的升级。
依托AIGC,媒体分娩渐渐变成众模态、众场景、众技艺相连合的生态合营干系,不光支柱各式内容创作、媒资内容构造化拘束、内容的精准营销,还能连合虚拟创制技艺、脑机硬件,达成元宇宙寰宇中拟真化、深度浸溺式的内容与场景体验。以满意分娩效能升级为底子,推翻媒体分娩力输出的办法,引颈行业进化。
AIGC的内容拟真性,也许模仿人类的行动、创意和推敲办法。例如 :天生式对话本事,使得人类可能通过自然言语达成人机对话,推翻守旧人机交互的办法。基于此技艺,不少媒体打制各具特质的数字人产物和内容,笼盖直播、文旅、企业助理等各样场景,变成立异财产链,缔造新的贸易机会。异日,越来越众的灵敏数字人将走入节目内容中,以 AIGC 大模子为大脑,也许师法人类的推敲办法,通过自然言语变成人与节目内容的互动,衍生更众操纵场景。
越来越众的媒体从业者利用AIGC辅助已毕闲居做事,可已毕问答对话、热门资讯获取、稿件内容主动天生、日程拘束等做事。AIGC已成为传媒范围辅助媒体分娩全流程中 的紧张用具,将底子 AI 本事以内容音讯说明为主的办法,升级为更具立异性的深度内容创作形式。媒体从业者将脱节操作性、反复性的分娩做事,饱舞内容创作的灵感,从而创作出加倍怪异和引人醒目的内容。
须要接续研习 AIGC 的基础道理、生长趋向、利用办法和特质,剖析搜罗、洗刷和标注内容素材数据的办法,以便也许通过符合的智能用具,采纳配合的素材数据辅助媒体内容创作。
媒体从业者须要依照 AIGC 供给的创意饱动,筹划、编辑、 提炼有代价的看法和立异理念,变成派头怪异的媒体内容。
AIGC 正在媒体分娩中的操纵面对不少伦理、德行以及合规题目,囊括模子音讯诓骗、数据隐私和版权的珍惜等。媒体从业者不光须要确保正在利用流程中所涉及各式素材数据的合规性,并且须要审核、鉴别模子天生内容真实凿性和到底性, 确保适当伦理德行模范,适配社会主流代价观。
综上所述,异日 AIGC 关于媒体从业者带来新的离间和央求,驱动媒体从业者的功课形式从专业创制转型为技艺创制。AIGC 悠久不会庖代人,只是接续驱动从业者本身本事 和专业素养得以晋升。
媒体行业以内容为中央,是引颈社会时期代价观的主赛 道。AIGC 融入媒体财产后,内容类型、贸易形式、财产构造都将发作改良,正在促进财产急迅改变的同时,也带来新的 题目和离间。
数据隐私安静是AIGC赋能媒体财产最紧张的危害题目。AIGC时期,数据被视为算法的基石。目前AIGC所利用的数据集,可以存正在未经正当授权而获取的侵权隐患。由此激励用户的隐私凌犯胶葛,将会对媒体行业生长带来明显影响。所以,务必坚守闭系的执法律例获取和打点用户数据。
内容版权是媒体财产的中央代价,AIGC赋能媒体分娩的流程中,可以面对侵袭常识产权的危害。AIGC通过研习、师法、转换已有内容作品,进而缔造新的产品。这些深化研习和内容师法的流程可以涉嫌侵袭内容完全者的常识产权。所以,媒体从业者要以技艺方法、管控流程等,避免侵权题目的发作。
演练数据集的质料缺陷将直接导致AIGC分娩的内容背离主流德行代价观,无法配合主流媒体引颈社会代价的功用。AIGC的原始演练数据集根源于人类社会海量的常识浸淀,可以存正在狭义、非公证、局部化等德行代价缺陷,比方散布作假音讯、漠视性群情、痛恨群情等。所以,媒体分娩中须要开发有用的审核机制,监视和复核内容的伦理德行代价,确保其配合社会主流德行的代价模范。
为应对AIGC所带来的危害和离间,邦度网信办于2023年7月宣布《天生式人工智能供职拘束要领》(以下简称“《拘束要领》”),为保护AIGC财产操纵的合规性和安静性,供给执法凭借。据悉邦度广电总局也正正在《拘束要领》的框架下 拟定闭系楷模条例,便于 AIGC 正在媒体行业的楷模操纵和生长。
完全的行业都值得被人工智能技艺重构。预测异日,跟着人工智能技艺的接续生长与先进,特别是天生式视频算法的到来,大模子必将推翻和重构媒体范围,这既是咱们媒体从业者们面对的宏大离间,同时也蕴藏着宏大的机会。何如自我革命,将大模子的技艺操纵到媒体范围,从而让内容创作家们更疾、更好地达成本身的创意,是咱们每一个媒体技艺人正在人工智能时期要解答的题目。
[1] 任杰. 人工智能技艺正在视频操纵中的生长——以重心播送电视总台 操纵为例[J]. 演艺科技, 2020(S1): 67-72.
[3] 郑弘, 闭美璐, 谭言. 天生式人工智能正在央媒的操纵初探——以央视 音信正在AI操纵范围的物色履行为例[J]. 声屏寰宇, 2023(6): 98-100.
[4] 喻邦明, 苏健威. 天生式人工智能海潮下的散布革命与序言生 态——从ChatGPT到统统智能化时期的异日[J]. 新疆师范大学学报(哲 学社会科学版), 2023, 44(5): 81-90.