各地大视听新技术应用实践
创始人
2024-10-31 19:11:52
0

图片

福建省广播影视集团

福建省广播影视集团贯彻落实党的二十届三中全会精神,积极响应国家创新驱动发展战略,依托“福云”优势,抢抓人工智能技术发展机遇,成立了福建省广播影视集团人工智能实验室(以下简称“实验室”),并通过科技赋能推动集团的节目内容生产和流程再造。目前,实验室利用先进算法和计算机图形学的高保真渲染技术已经训练出了多个以台内主持人为形象的虚拟数字人主播“曾宝”“金子”等,使得虚拟数字人不仅在外观上逼近真人,还能模拟人类的声音和行为,提供自然和真实的交互体验,逐步成为媒体行业创新发展中的重要力量。

在虚拟数字人赋能内容生产的过程中,福建省广播影视集团汇聚了多模态交互技术、深度学习、语义理解、动作和表情捕捉技术等多项创新成果,对虚拟数字人进行训练。随后,将虚拟数字人与AIGC技术相结合,有效降低了投入成本和后期维护成本,同时实现了节目制作的智能化创作,提高了内容生产效率,并丰富了内容的表现形式和表现力。AIGC技术促进了AI工程师与内容生产工作者之间新型合作模式的形成,为内容创作和呈现开辟了全新的技术视角。在AI技术与数字人技术的共同作用下,想象得以突破界限,为观众带来了前所未有的体验。

2024年4月23日,实验室发布了世界读书日的宣传片,该片是第一次将福建省广播影视集团训练的虚拟数字人主播“曾宝”融入节目中,让真假主持人隔空对话,打破时间、空间的限制,实现了文化与科技结合,科技赋予文化前进的动力。同时,还利用虚拟数字人多语言播报的功能,在节目中让虚拟数字人主播“曾宝”用中、英、法、俄、阿、西6国语言进行了世界读书日宣传标语的播报。此次虚拟数字人制作使用了文字和语音2种方式驱动数字人口型变化,以实现不同的节目效果,丰富了节目的表现形式,带给观众全新的新闻视听体验。

接下来,福建省广播影视集团以数字人为突破口,借助AI技术的赋能,推出了第一档文化栏目IP。继虚拟数字人“曾宝”之后,福建省广播影视集团训练了虚拟数字人主播“金子”,并将其应用于《福文化·名人佳作》这一日常栏目。这位新的虚拟数字人主播能够自由更换服装,突破了以往技术上的限制,使得播报时长从不足2分钟提升至近10分钟,真正实现了内容生产的智能化和精准化,标志着技术应用的实质性落地与创新突破。

福建省广播影视集团在虚拟数字人技术领域的前瞻性布局以及实验室的成立,为广播影视行业的数字化转型提供了新的思路和实践路径。这一创新实践不仅显着提升了内容生产的效率,还极大地丰富了内容的表现形式,为观众带来了更加自然和流畅的交互体验。

展望未来,随着技术的不断进步和创新,广播影视行业必将迎来更加智能化、个性化和互动化的变革。虚拟数字人技术的应用领域也将不断拓展,其在广播影视行业中的应用将变得更加广泛和深入。随着技术的日益成熟和市场接受度的不断提升,虚拟数字人将在广播影视行业中扮演越来越重要的角色,为观众带来更加丰富和多样化的体验。同时,虚拟数字人技术的广泛应用也将为广电行业带来新的商业模式,推动整个行业的可持续发展。

山东广播电视台

山东广播电视台较早布局虚拟现实与人工智能技术,成立山东一千河数字科技有限公司,专注虚拟数字人技术研发与应用,利用虚拟数字人平台作为AIGC技术的重要应用载体,为广播电视节目提供了更新颖的表现形式、更多样化的生产内容。

一是虚拟数字人技术助力广电内容升级。2023年3月,山东广播电视台自主研发的超写实数字主持人“海蓝”亮相,以“评论员”身份登上《山东新闻联播》,成为全国首个在省级卫视新闻联播节目中使用的超写实数字主持人。2023年、2024年“海蓝”连续两年亮相全国两会、山东两会,与人大代表展开跨次元的精彩对话,解读政府工作报告。2024年7月14日,山东首档AI数字主播电视新闻专栏《海蓝新声》正式上线,虚拟数字人智能写作、配音、播报在多档广播电视节目实现常态化使用。此外,以“海蓝”为基础的AI声音模型已成功应用于《数字强省》《美丽山东》《市场监管在线》《应急在线》等多档新闻节目制作中。2024年,“海蓝”荣获国家广播电视总局第三届广播电视和网络视听人工智能应用创新大赛一等奖。

二是虚拟数字人技术助力党建文化宣传。在山东对口支援西藏30周年、孔繁森同志殉职30周年之际,山东广播电视台启动了孔繁森数字形象制作项目,将人工智能技术运用于孔繁森精神的传承与弘扬。进行孔繁森同志数字形象制作,对于推动孔繁森精神的传承弘扬工作迈向新阶段、发挥新价值具有重要的时代意义。山东广播电视台拟通过唇形编辑、声音克隆、大语言模型等一系列模型训练技术,同时使用实景拍摄+AI脸型处理技术,提升虚拟数字人模型的语言理解和生成能力,让孔繁森同志以鲜活的形象重新站在人们面前,引领孔繁森精神传承弘扬工作迈向新阶段。目前,山东广播电视台正在着力打造英雄模范群体数字形象矩阵,未来,将使用虚拟数字人技术复刻更多英雄模范形象,探索适应新时代需求的党建宣传模式。此外,山东广播电视台与德州党史研究院联合制作了2.5D虚拟数字人“郭亚茹”,应用于《数字人讲党史话史志》系列短视频,将党史史志的宣传由传统文字转化为影音。

三是虚拟数字人技术助力社会公益事业。山东广播电视台自主研发了虚拟数字人手语系统,使用虚拟数字人为电视新闻节目提供手语翻译服务,方便听障人士快速了解新闻信息,目前已成功应用于《闪电直播间》等节目制作中,该套系统已被国内其他省级媒体引进使用。山东广播电视台为山东广播电视局制作了应急广播虚拟数字人快速播发系统项目,由“海蓝”担任应急广播信息播报员,助力应急管理创新升级;为中国新闻名专栏《问政山东》开发数字主持人“李莎”,在虚拟数字人的引领下,用户可以更加直观地了解平台功能,轻松完成问题反馈、建议提交等操作,同时,虚拟数字人还可以就用户关心的部分政策内容提供咨询服务,实现手机H5页面下轻量级虚拟数字人互动。山东广播电视台与潍坊市公安局联合打造了全省首个数字警察主持人,2.5D虚拟数字人“潍潍、安安”已投入智慧警务、警察公共关系等多种应用场景中。山东广播电视台与山东体育局联合打造的山东户外运动休闲专属数字代言人——“运运”在日照2024中国运动休闲大会暨体育旅游季开幕式上正式亮相,成为山东户外运动休闲传播的“新使者”。

目前,山东广播电视台已经成功构建虚拟数字人批量化生产平台,可以根据不同节目风格,生产不同类型的虚拟数字人,产出更多样化的内容,满足不同受众群体的需求。借助虚拟数字人技术的广泛应用,从新闻资讯到政务服务,从教育科普到文化传播,广播电视节目的内容边界得到进一步拓展,山东广播电视台已成为国家广播电视总局数字人应用标准、工信部信标委数字人技术标准的成员单位,被评为中国优秀数字人企业。未来,在新技术的推动下,山东广播电视台广播电视产业链将进行新一轮升级,新业态、新模式将继续创新和发展。

北京广播电视台

超高清不仅代表了视频技术高质量发展的重要方向,也为产业链升级开辟了广阔空间,其高分辨率、宽色域、HDR高动态范围、高帧率、多维声伴音,为观众提供近乎真实的视听体验和身临其境的沉浸感,也为户外大屏、电视中屏、移动小屏等泛载终端提供了丰富的应用场景,同时拓展了线下VR头戴式、360°环幕、球幕、AR增强、XR应用空间的沉浸式呈现。作为沉浸式视频的基础技术,超高清技术为高端垂类场景拓展创造了无限可能,为沉浸式视频技术开发、应用提供了内容和效果上的支撑。

2020年底,为服务北京2022年冬奥会宣传报道、营造奥运氛围,北京广播电视台冬奥纪实4K频道开播;2021年底,依托于长期的8K超高清素材积累,北京广播电视台又率先开播了冬奥纪实8K超高清试验频道,通过有线电视网络覆盖北京市部分地区,圆满完成了北京市“科技冬奥”应用示范任务,研发出一套完整涵盖拍摄采集、后期制作、播出传送等各个技术环节、具有自主知识产权的超高清制播体系,年均8K节目产能达到了100个小时,实现8K超高清全传播链条技术验证,成功打造“科技冬奥”闪亮名片。

北京广播电视台长期保持对沉浸式视频技术的跟踪与研发,尤其在XR技术应用、近眼显示技术研究方面都取得了一定的成绩,在节目生产、特技合成、线下互动、服贸科技类展会、博物馆展陈等方向积累了大量实践经验,储备了人才,打造了应用场景和案例。

北京广播电视台虚拟演播室技术的应用可追溯到1999年,先后应用在《城际特快》《皇帝的新衣》等精品节目中。近几年,以《民法典》等政策解读类、《金环日食大直播》等空间展示叠加类、《数字北京》等数据分析呈现类节目为代表,沉浸式虚拟植入技术的应用愈加高效与成熟,在观众理解节目内容和提高参与度方面发挥了重要作用。

此外,北京广播电视台一直积极探索和推动近眼显示技术在广播和电视领域的应用,制作沉浸式VR节目,应用于大型活动、文旅演出、赛事直播等方向。例如,《戏剧天地》戏曲、《长翅膀的杜若》话剧等演出,为传统演出提供了全新呈现方式,沉浸式观影对年轻受众具有较高的吸引力;《正阳门考古遗址VR呈现》极大地丰富了用户在不同场景下的体验感受,当遗迹回填后,这一独家性数字资产就更显珍贵。同时,通过技术研发和应用实践,推动相关产品的优化,助力了整个超高清VR产业链的良性和高质量发展。

在线下沉浸式呈现应用场景中,北京广播电视台利用180°、360°拍摄技术为环幕空间展示提供了高品质素材,制作的《北京汽车生产线宣传片》走出传统屏幕,线下展示使受众沉浸式体验精密加工的过程与细节;《中关村论坛动画形象增强型AR》通过拓展虚拟空间、增加科技感元素,为户外“L”形屏幕提供了3D立体出屏视觉呈现效果。

在此基础上,北京广播电视台于2020年规划建设了全媒体超高清扩展现实演播室,将超高清EFP现场制作和沉浸式XR扩展现实拍摄技术有机结合,通过虚拟场景制作、场景大屏显示、大屏扩展和AR前景植入等技术手段协同配合,已经完成了不同门类近50个XR场景的搭建与使用。例如,穿越时空的清代书画《冰嬉图》,可以让穿着清朝服饰的主持人走进画中,与画上的人物互动;《抖音科学夜》的火山场景,让地质科学家走进现场寻宝;《小平,你好》情景再现伟人的130个瞬间;《创新北京》登临月球,在太空上做科普知识讲解。另外,更是与云冈石窟等全国重点文物保护单位合作,制作了《遇见云冈一眼千年》,通过3D扫描将6个宏大的虚拟石窟场景搬到了演播室,实现云冈石窟数字化场景,打造了“数字文旅+超高清+XR沉浸式”的创新应用场景。

未来,北京广播电视台的研发、制作团队将充分发挥广电媒体的内容和技术创新优势,以超高清技术、沉浸式应用手段共同赋能和定制高新视听创新类产品,拓展不同应用场景,勇于创新与实践,在探索中试错、修正、提升,助力高新视听产业高质量发展。

河南广播电视台

《唐宫夜宴》作为河南广播电视台打造的全国知名IP,表现了中国深厚的文化积淀,引领了唐宫系列国潮在现代社会的全面流行,备受年轻观众和消费者的欢迎。如何将IP与先进技术结合,形成新的传播是大象元数字科技股份有限公司成立以来一直在思考和探索的问题。

《关于推进实施国家文化数字化战略的意见》明确指出,发展数字化文化消费新场景,大力发展线上线下一体化、在线在场相结合的数字化文化新体验。同时,基于沉浸式传播时代即将到来这一判断,河南广播电视台依托“大象元”平台,将AIGC、XR等科技与中国传统文化、视听艺术相结合,打造了《唐宫夜宴》《隐秘的秦陵》XR虚拟现实电影,以前沿科技赋能激活传统文化生命力,以新质生产力赋能文化产业高质量发展。目前,两个项目已经分别在北京和上海落地运营。

观众戴上VR设备,破屏入画,一秒穿越。《唐宫夜宴》中,观众在唐小妹的带领下身临其境回到大唐盛世,见证中国两位着名诗人李白、杜甫的初次相会、饮酒赋诗,感受中华文化的博大精深和历史的源远流长;《隐秘的秦陵》利用先进的三维重建与渲染技术实现了秦始皇陵内部虚拟重建,观众扮演探险家的角色,可以近距离探秘秦始皇陵内部构造和大秦帝国的历史脉络,体验巍巍磅礴的中华秦汉文明。

《唐宫夜宴》多人大空间XR体验采用了大空间视觉重定位技术,实现了近1000m2的场地内可以最多同时容纳近100人的大空间XR体验。在定位的绝对精度上,实现了从大空间原点到其余任意位置的距离精度差小于1%;在大范围累计漂移距离上,实现了从原点出发,在空间随意移动后回到原点的误差小于1cm,并且安全区的找回率超过98%。

《隐秘的秦陵》项目组通过到甘肃、内蒙、陕西多地现场扫描古建筑,完成超过10000m2实景扫描,采用Eeasten三维建模标准和PBR渲染技术,利用激光扫描技术对秦陵周边进行了详尽的三维数据采集,重要场景扫描精度达到毫米级。项目使用的大空间娱乐技术,为多人提供沉浸式3D体验的娱乐形式,用户可以在虚拟环境中实时感知其他体验者的位置,实现互动。项目组将VR硬件设备、虚拟环境、动线交互设计等进行集成和整合,形成一个完整的大空间解决方案,体验者通过穿戴VR设备,能够完全沉浸在这个精心设计的虚拟世界中。

央广云听文化传媒有限公司

近年来,随着智能网联技术的迅猛发展,车载信息娱乐系统逐步成为汽车产业的重要组成部分。作为广播电视行业在车载场景中的延伸,云听车载音频服务正在迅速崛起,为用户提供了丰富的听觉体验。云听车载平台通过与车载设备的深度融合,结合广播电视丰富的音频内容资源,构建了一个全新的车载音频生态系统。

云听车载平台也称“云听车联网”,作为总台唯一的车载音频媒体平台,已覆盖全国多个主要城市的用户,为驾驶过程中的用户提供了智能、便捷的音频服务。云听车联网平台率先实现了车载超高清音频技术的应用,通过三维菁彩声技术,用户能够享受沉浸式的立体声音效体验,极大提升了车载音频的听觉感受。此外,云听车载平台还支持“可见即可说”的人性化车载交互方式,用户只需看到屏幕上的按钮或标题,并通过语音指令,就能轻松完成操作。这种智能化的交互方式不仅提高了驾驶过程中的安全性,还增强了用户的便捷体验。

云听车载平台的技术领先性主要体现在其音频处理和智能交互能力上。其中,三维菁彩声技术为车内用户提供了更具空间感的音频体验。该技术能够精确解析音频信号,并根据车内不同座位位置进行优化渲染,确保每一位乘客都能体验到立体、有层次的声音效果。2023年8月,在北京国际广播电影电视展览会(BIRTV)上,云听展示了搭载三维菁彩声技术的多款车型,以及面向车内不同坐席位置的三维空间音频全新听觉体验,受到了广泛关注。

此外,云听车载平台还具备智能即时消息通知功能,尤其是在国家应急广播预警、内容推送等方面表现突出。云听车载平台能够通过地理定位和风险等级智能推送极端天气、地质灾害等应急信息,帮助用户及时了解潜在的风险并做好应对准备。这不仅增强了平台的实用性,也进一步强化了用户的安全保障。

云听车载平台在技术创新和内容生产方面积累了丰富的经验。首先,云听车载平台正在推动内容的智能化生产与分发。其次,云听车载平台能够将文字内容快速转化为音频内容,大幅提升了内容生产的效率和质量。最后,基于大语言模型(LLM)的应用,云听车载平台能够智能生成音频内容的标题、摘要和关键词,深入理解和挖掘内容的潜力。

在内容分发方面,云听车载平台依托AI技术,实现了个性化推荐。通过分析用户的历史行为和偏好,云听车载平台能够精准推荐符合用户需求的定制化音频内容。此外,结合用户的语音特征和情感倾向,云听车载平台计划推出基于检索增强生成(RAG)的智能问答和对话功能,为用户提供更加贴心的互动服务。

随着智能网联汽车技术的不断进步,云听车载平台的发展前景广阔。未来,云听将继续深化与各大汽车品牌的合作,推动车载音频系统与云听车载平台的深度集成,力求为用户提供更加智能化、个性化的音频服务。通过与汽车制造商的联合创新,云听车载平台将进一步提升其在车载场景中的应用广度与深度。同时,云听计划借助AI技术的持续发展,进一步优化云听车载平台的内容生产和分发流程。通过大语言模型技术的应用,云听车载平台将能够实现更加智能的内容理解与推荐,确保每一位用户都能享受到最符合其需求的音频内容。

总的来看,云听车载平台凭借其在技术和内容方面的优势,已在车载音频领域取得了显着成果。通过不断创新与技术升级,云听车载平台在用户体验、内容生产和个性化推荐等方面实现了突破。然而,随着市场竞争的加剧,云听仍需不断优化其技术与服务,进一步挖掘用户需求,才能在激烈的市场竞争中保持竞争力。未来,随着车联网和AI技术的进一步发展,云听车载平台有望成为车内智能娱乐系统中的核心组成部分,为用户带来更加丰富、便捷的听觉体验。


相关内容

热门资讯

我国自主研制的重大航空装备AG... AG600是我国自主研制的重大航空装备,它最大起飞重量60吨,可载水12吨,最小平飞速度每小时220...
娃哈哈卖AD钙奶童鞋?还有营养... 红星资本局4月20日消息,近日,一款电商平台售价139元的“娃哈哈AD钙奶运动鞋”引发关注。此外,还...
射击世界杯秘鲁站 王子菲破世界... 北京时间20日,2025射击世界杯秘鲁站继续进行。在女子10米气步枪决赛中,中国选手发挥出色包揽前三...
美国又一小飞机坠毁 机上载有4... 当地时间4月19日,央视记者获悉,美国伊利诺伊州警方当天上午接到一起小型单引擎飞机坠毁的报告。美国联...
菲律宾群岛地区发生5.6级地震... 中国地震台网正式测定:4月20日00时11分在菲律宾群岛地区(北纬5.85度,东经124.20度)发...
有人贷款17万买黄金盈余过万,... 红星资本局4月19日消息,今年以来,金价不断上涨。在火热的行情下,有人开始贷款买金。红星资本局咨询多...
“这是本届政府的态度”,英国明... 英国《每日电讯报》18日刊登了对英国财政大臣蕾切尔·里夫斯的专访,里夫斯在专访中表示,英国应与中国建...
揭晓!人形机器人半马完赛奖+专... 由中央广播电视总台北京总站参与联合主办的全球首个人形机器人半程马拉松今天圆满完赛。完赛奖和各类专项奖...
一中国公民在日本意外死亡,我总... 中国驻新潟总领馆19日发文,郑重提醒领区中国公民加强安全防范。近期,涉旅居领区中国公民或游客的人身安...
江西广播电视台(集团)党委书记... 江西广播电视台(集团)党委书记、台长、董事长【龚荣生】:以思想引领变革,新技术赋能平台,让美好清晰可...