南京广电AI智媒创新研究院:以人工智能技术驱动媒体创新发展
| 国家广电智库| 2024-04-17
【流媒体网】摘要:加快形成以AI智能和媒体创新于一体的新质生产力。

  南京广播电视集团AI智媒创新研究院由南京广播电视集团发起,于4月7日揭牌成立,秉持“AI智能技术驱动媒体创新发展”的理念,以“打造自主可控的智能媒体融合创新平台”为出发点,重在以数智理念、广电思路探索AI智媒广电新场景价值潜力,整合优质资源,依托人才优势,不断加大人工智能应用研发力度,自主研发数字人、人脸识别系统、AIGC等一系列AI应用。研究院利用南京广电集团丰富的视觉创制背景,创新实践AIGC融合应用,推进城市数字孪生新场景建设,应用推广AR/XR虚拟现实技术和虚拟数字人技术,探索基于AI应用的新一代一站式虚拟制片及动作捕捉解决方案。

  2024年政府工作报告中提出,深化大数据、人工智能等研发应用,开展“人工智能+”行动,这是我国政府工作报告第一次提出“人工智能+”。

  此次AI智媒创新研究院的揭牌成立,正体现了南京广电对以“融媒发展”为核心的AI智能化应用的前瞻性布局,着力构建以用户为中心、以内容为纽带、以技术为驱动的跨生态智能媒体新体系的坚定决心。

  研究院已获多项国家级及省市奖项,并获得11项软件著作权,包括《音频智能转换系统V1.0》《数字人智慧融媒平台V1.0》《视频人脸检测AI识别系统V1.0》《内容大数据智能策划AI应用平台V1.0》《创新型AI图片生成系统V1.0》《AI智媒体创新型生态系统V1.0》等。

  采用当下领先的数字人,及驱动技术新理念

  研究院自主打造的多位独家广电数字人形象,支持多种风格的服装、妆容、发型变化,适用于多种不同应用场景。

  利用声纹训练模型对台内主持人的声音进行训练、复刻,基于语义理解实现数字人对用户意图的理解与答案生成,结合语音合成、驱动模型实现回答内容与数字人表情、声音的有机融合。

  你能想象荧幕上天真活泼的孩童幕后其实是个七尺男儿?在这儿仅需运用单目摄像头动作捕捉技术,无需标记点无需适配就可实现精准捕捉上千个面部微表情,同时进行全身肢体的实时捕捉,实现数字主播与真人进行实时交互,摆脱传统动捕对设备场地的高要求。

  目前,该全新的数字IP率先运用在南京少儿频道虚拟主持人项目中,通过虚幻引擎给观众带来逼真有趣的数字主播,提高了传统节目制作的质量、效率,并大幅度降低了制作成本。

  着眼于智媒时代下,内容生产流程的再造与重构

  推进AI智媒广电创新应用 利用科技+内容实现破圈

  研究院已自主打造了牛牛CHAT智能对话、AI文生图、AI视频等一系列生成式AI应用,实现文本、图片、视频等不同内容类型的高质量自动生成。利用新技术、新应用为新媒体业务运营赋能,提升内容生产效率,创新内容呈现形式,打造互联网形态下的优质新闻产品。

  同时,研究院从内容创制为导向出发,采用LED虚拟制作影棚与绿幕抠像相结合的方式进行虚拟场景视觉呈现,已应用于《学习宁聚力》《思想的力量》《智见未来》《主播说档案:纪念抗美援朝战争胜利70周年》等多档自制节目中。通过虚拟场景的呈现,节目更加生动、形象,观众也能够更加深入地理解和感受节目的内涵。此外,虚拟拍摄技术的使用还提高了节目制作的效率,减少了制作成本。

  研究院还将AI绘画创造性投入到节目生产制作中,在各个不同的项目中,分别使用了AI智能上色、AI场景绘画、AI智能重绘等AI绘画制作技术,减少了制作成本,提高了画面质量。

  下一步,研究院还将携手合作共建单位持续改进和优化包括数字人驱动、AI文生图在内的各项AI技术模型,不断提升AI创新应用在生产效率和质量方面的表现。

  聚焦用户个性化服务 功能持续赋能升级

  南京广电始终坚持产品创新和技术创新并举,全面落实用户思维,研究院针对牛咔视频APP开发多项人工智能服务功能:包括用户数据深入挖掘和分析,建立具有自主知识产权的个性化内容推荐系统;开发应用“千人千面”,提高内容分发的精准度和用户的参与度。

  通过自主研发NLP模型算法,基于实际业务构建三级标签体系,细分20个大类、136个小类,涵盖标签2.3万个,并结合语音识别、文本抽取等技术实现文章、视频、音频等全媒体内容的标签自动提取、分类,深度分析用户内容偏好,初步构建新闻时效、内容兴趣、点击热度相结合的个性化内容推荐机制,优化平台用户体验。

  基于AI深度学习 智能审核为广电媒体融合赋能

  一直以来,南京广播电视集团致力于智能中台建设工作,以AI技术为突破口,基于牛咔视频实际业务,构建集文本、图片、音频、视频于一体的智能审核中台,实现全台日常业务中的文本检测过滤、图片智能审核、音频识别检测、直播视频人脸识别等全要素的实时审核功能。

  下一步,研究院将继续提升视频人脸识别模型的性能,通过技术进步助力内容生产业务中的高精准度人脸识别,提升内容审核的速度和精准度,结合电视业务流程进一步优化智能审核系统,全面提升集团新闻发布的审核效率与内容安全。

  打造创造场景试验田,开放式思维主动设计

  融合虚幻引擎,打造真实细腻的城市数字孪生项目,可以做到真实还原三维城市景观,同时具有逼真的基于物理的照明和阴影,可更改季节、天气或一天中的时间。可以提供基于场景的图像、动画、全景图、VR视频和客户端演示,广泛用于单个建筑3D演示、3D沙盘场景漫游、3D场景复现、室内场景(博物馆,党史馆)漫游等,支持VR模式。

  近年来,南京广播电视集团一直坚持拥抱新技术,以自有百万小时的优质视音频媒资库为基础,以技术赋能内容创新创优为内核,持续探索科技与视听融合的无限可能。

  万涓成水,奔涌成潮。未来,研究院将携手各方资源,以促进传统媒体转型发展为核心,赋能生产流程升级,推动媒体融合的内容创新、形态创新和传播创新,加快形成以AI智能和媒体创新于一体的新质生产力,让新技术服务于传统媒体,全面打造行业领先的智媒生态视听产品。


#每日“行情”触手可及!视听早报 不仅是一个轻量级的资讯工具,更是一个集阅读、听力于一体的实用神器!即刻用起来吧~

责任编辑:李楠

分享到:
版权声明:凡注明来源“流媒体网”的文章,版权均属流媒体网所有,转载需注明出处。非本站出处的文章为转载,观点供业内参考,不代表本站观点。文中图片均来源于网络收集整理,仅供学习交流,版权归原作者所有。如涉及侵权,请及时联系我们删除!