
江苏省广播电视总台(集团)成立于2001年6月,以”责任塑造形象,品质成就未来”为办台理念,五次入选全国“文化企业30强”,连续17年入选“中国500最具价值品牌排行榜”,品牌影响力和综合实力位居全国省级广电前列。江苏省广播电视集团有限公司“云+边缘”智能内容管理服务系统是县融省级技术平台的扩展,为省域内县级融媒体中心及其他租户的融媒体内容资源交换及管理提供支持,为平台用户提供了完整的媒体内容管理功能和智能服务。整个项目采用云原生技术,引入云容器集群管理对系统平台框架进行管理,引入智能服务、大数据服务,提升平台框架健壮性的同时,增强扩展能力、业务支撑能力,以便适配灵活多变的融媒业务开展。1.公有云架构本次项目基于公有云架构模式进行,并且可在公有云、私有云和混合云等新型动态环境中建立可运营的应用服务和内容服务,并将一省一平台的可管可控纳入建设基础。2.云原生设计本次建设采用云原生技术,通过云容器引擎,提供高性能可扩展的容器服务,基于云主机快速构建高可靠的容器集群,兼容Kubernetes及Docker容器生态,支持轻松创建和管理多样化的容器应用,并提供容器故障自愈,监控日志采集,自动弹性扩容等高效运维能力,从而实现容器集群的编排、交付、管理。3.自研AI算法针对本次项目的构建目标和应用场景,基于弹性调度框架,荔枝云自研针对广电行业应用的各种AI算法,包括不局限于命名实体识别、关键字提取、新闻文本分类、新闻摘要、字幕识别、镜头语言识别、人脸识别等,并通过统一接口提供服务,让业务应用按需选择,快速集成AI能力,快速对外输出不同的智能化功能和服务,以最大限度地适应当前媒体行业的融媒体建设的多样性、可扩展性的要求。4.智能媒资本次项目建设中使用的荔枝云自主研发的媒资系统,以AI应用颠覆传统媒资功能,不再只是具备归档、编目等简单功能,使媒资向平台化演进,从真正意义上实现媒资系统的运营化、智能化。

上海文化广播影视集团有限公司(SMG)在媒资管理系统的构建过程中,通过引入人工智能及互联网技术,形成了一个具备自动编目、媒资百科、知识图谱、自动主题推荐等功能的“新型广播电视媒资生产管理平台”。该平台帮助SMG 实现媒资内容衍生产品的自动化和智能化生产,使其从传统档案管理型媒资向生产服务型媒资转变。【关键词】人工智能,媒资管理,自动编目,知识图谱,隐性水印0 引言媒体资产管理的概念从提出至今已经数十年,传统广播电视媒资管理理念及系统构建如今已非常成熟。但是,在传统的构建理念下,广播电视媒资系统长期存在着一些难以解决的痛点,严重制约了系统的使用效能:第一,传统广播电视媒资的海量内容长期沉淀于系统中,缺乏内容产品的深度开发,从而造成媒资素材使用效率整体低下;第二,传统媒资管理通常自成封闭体系,缺少与外部实时资讯的联动,对于新媒体时代的节目内容快速生产模式缺乏有效响应;第三,基于人工编目的元数据生产模式生产效率低、成本高、主观性强,无法满足全媒体资讯的大规模、快速生产需要。SMG 基于AI 的媒资内容管理平台是传统广电行业在AI技术应用上的一次成功实践,通过在媒资管理各主要业务流程中引入人工智能及互联网技术,构建起一个具备自动编目、媒资百科、知识图谱[1]、自动主题推荐等功能的“新型广播电视媒资生产管理平台”。该平台帮助SMG 实现了媒资内容衍生产品的自动化和智能化生产,有效解决了传统媒资管理中的长期缺陷,使SMG 得以从传统档案管理型媒资向生产服务型媒资转变。1 系统的设计与实现1.1 总体架构设计基于AI 的媒资内容管理平台通过综合应用互联网、人工智能等最新IT 技术对现有媒资管理业务进行重新定义,对系统的性能和未来的横向扩展性具有较高的要求,传统的系统部署方案不利于大规模业务数据计算或者业务的快速扩展。因此,在系统设计中,通过SMG 自主构建的IT 基础资源平台作为系统的底层技术架构平台,发挥该平台在计算弹性、资源扩展性等方面的系统优势,对IaaS、PaaS、SaaS 层的资源服务进行统一设计,从而构建出一个完整的、符合现在及将来业务拓展需求的高标准的基于AI 技术的广播电视媒资生产管理平台,如图1 所示。1.2 业务流程设计系统以媒资智能检索为核心,提供了互联互通回调、自动编目、媒资百科生产、自动水印、维权检测、专栏专题等主要业务功能,分别面向SMG 全台记者编辑和媒资管理部门用户,为他们提供不同业务场景下的各项具体功能,如图2 所示。1. 媒资智能检索媒资智能检索是平台的核心功能之一,主要提供记者编辑对SMG 各系统中的节目内容、素材、媒资词条、节目介质等进行统一的检索和展现。用户通过系统提供的全文检索框实现对节目资料的统一检索,检索结果可根据需要进行分类展示,并且结合知识图谱功能,对检索结果中的相关词条以及词条的知识图谱进行展示,从而向用户提供基于媒资内容的智能推荐。针对检索的内容如果有视频信息用户可以提出回调申请,回调流程在媒资各业务系统中最终实现。2. 互联互通回调为了满足媒体管理中的素材一站式回调需求,在确保系统安全性的前提下,项目组设计了符合广播电视媒资管理特点的互联互通传输系统,在基于AI 技术的广播电视媒资生产管理平台的指挥调度下,利用安全传输网关,将各媒资系统的节目文件传输到相应的目的地(各制作系统及办公网公共存储)。3. 自动编目管理系统在设计中,通过使用语音识别、OCR 识别等人工智能技术,对媒资内容进行快速、自动编目。对于一些画面、声音质量较好的节目素材,尤其是批量的时长较长的节目素材,可实现超远人工的高效、全面的信息编目。同时,由于系统设计时将自动编目数据和人工编目数据并存于媒资数据库中,在资料检索时可同时进行检索和展现,一方面丰富了系统的检索内容,另一方面有效提升了全文检索的准确度和素材的召回率。4. 媒资百科生产项目通过构建基于媒资素材的媒资百科体系,将媒资素材层级的编目标注进一步提升至主题层级的知识加工,并且在媒资百科生产流程中引入了互联网热点关联分析、一键生成知识图谱等创新功能,从而使媒资百科生产模式向半自动化的批量化生产发展,大幅提升了主题知识加工的效率和准确度。5. 自动水印管理平台融合了最新的视频水印技术,主要应用于对视音频等数字内容产品的版权提供保护。针对高码内容资源,加入隐性水印,记录版权所属、分发渠道等信息,视频经压缩,调色,缩放,剪辑、转码等操作后仍旧能够准确无误提取出其中的水印信息,达到版权追溯效果;针对低码内容资源的下载,加入显性术印,方便地实现新媒体发布的同时对盗版行为起到警示作用。两种水印保护措施相互配合,为全媒体覆盖的版权保护和盗版跟踪提供了有效的手段6. 维权监测自动检测模块将基于现有的版权维护流程,将人工记录和归档方式,转换成高效的电子化操作。通过SMG 维权管理子系统设计将通过互联网,与律所、监测方多方合作完成对版权资产的维权保护,并将信息与媒资版权相关业务进行整合展现。同时,利用隐性水印的解码,实现对已加嵌隐性水印的珍贵素材进行版权检测,确认素材的版权所属、素材的流出途径等。2 关键技术与创新2.1 媒资百科及知识图谱SMG 基于AI 的媒资内容管理平台在广播电视媒资管理领域,首创了媒资百科、知识图谱等媒体内容产品,并实现大规模半自动化生产。具体实现上,通过智能语义分析和关联技术完成音视频资源的快速聚合,形成媒资百科,并在媒资百科生产过程中自动采集互联网知识数据,对不同来源数据的结构化处理,提取实体信息,并通过算法计算实体间的关联关系,最终生成媒资知识图谱。AI 技术的运用,更是将媒资百科生产从纯人工生产方式向半自动化生产转变,提升了生产效率,快速扩充SMG 媒资百科词条数据,为终端节目制作提供基于媒体内容资源的知识服务。2.2 自适应嵌入强度的视频隐性水印技术基于改进的DT-CWT 算法[2],自主研发隐性水印技术,利用图像处理,密码学和计算机技术对视频进行分帧处理,通过变化域的嵌入保证了水印的安全性,同时利用人眼不敏感的第三层高频子带嵌入保证了水印的隐蔽性,进而较少地损失了视频的质量。同时,嵌入的水印有较好的鲁棒性,可以抗多种视频编码格式的转码,以及视频码率的压缩,画面的调色和裁剪等,为全媒体覆盖的版权保护和盗版跟踪提供了有效的手段。2.3 基于人工智能的媒资素材智能编目平台利用AI 识别技术所架构的智能媒资编目系统年产量可达3 万小时,大幅降低了媒资编目的人力成本。同时,系统将自动编目结果与媒资素材检索、媒资主题推荐等业务流程相结合,进一步为记者编辑提供基于人工智能的智能媒资服务。在智能媒资编目的具体实现过程中,我们将每台设备、每个应用模块都进行了标准化处理,即:只要确保应用模块基本属性一致,可由不同的程序开发语言或第三方应用替换,随时更换所需的应用模块。这种应用模块的标准化构建技术理念,对于今后自动编目功能的扩展、技术更新提供了充分的空间。2.4 高性能分布式全文检索系统由于系统涉及SMG全台广播电视媒资内容的生产和调用,对实时检索能力和容错能力有非常高的要求,项目组以Solr和Zookeeper 为核心,构建了一组完整的分布式全文检索系统,以确保检索性能。针对媒资内容多层级、多系统来源的特点,项目组分别从排序策略、分词器、词库更新等多个维度对检索系统进行整体调优: (1) 在排序策略上,通过使用Solr的edismax实现的方法,构建自定义评分器,优化boost 评分。(2)采用针对Lucene 全文检索优化的查询分析器IKQueryParser,采用歧义分析算法优化查询关键字的搜索排列组合,从而极大提高检索的命中率。(3)集中管理词库文件,在各个Solr 节点,定时从数据库或缓存里读取并更新(在IKAnalyzer 源码的Dictionary 类中进行更新),从而保证整个检索集群只需维持一份词库文件,而且可以支持结合本地词库+ 数据库的方式一起工作,为分词词库的扩展提供了可行性。3 实际效益基于AI 技术的广播电视媒资生产管理平台汇聚了SMG百万小时的媒体内容资产信息,面向SMG 全台用户,覆盖传统和新媒体节目制作,提供了一站式媒资生产管理服务:一方面,系统提供的基于AI 技术的智能编目已用于大批量素材的日常编目工作,年节约编目成本约600 万元,同时还被应用至唱词翻译、场记速记等节目生产领域,产生了额外经济效益;另一方面,系统所提供的自动水印方案,为SMG 新媒体节目分发和素材交易提供了有效的版权保护手段。平台上线运行以来先后支撑了博鳌亚洲论坛峰会、改革开放40 年等重大宣传报道任务,发挥了突出的作用。4 结束语人工智能技术的应用和普及对于传统广播电视内容生产效率的进一步提升具有显著促进作用,其关键在于解决技术创新与业务流程的适配,从而带动业务模式的变革与创新。SMG 在媒资管理系统的构建过程中,通过引入人工智能及互联网技术,形成了一个具备自动编目、媒资百科、知识图谱、自动主题推荐等功能的“新型广播电视媒资生产管理平台”。该平台帮助SMG 实现媒资内容衍生产品的自动化和智能化生产,使其从传统档案管理型媒资向生产服务型媒资转变。平台将人工智能技术与广播电视媒资生产管理实际业务相结合,实现了降本增效,提升了服务水平,成为人工智能技术在广电行业成功应用的范例。同时,通过自主研发的隐性水印技术,首次在行业内实现节目素材版权的追踪保护,对于完善我国自主创新的数字版权管理生态体系也具有积极的推进作用。

近日,工信部、中宣部、交通运输部、文化和旅游部、国家广播电视总局、中央广播电视总台等六部门联合印发了《关于开展“百城千屏”超高清视频落地推广活动的通知》(以下简称《通知》)。随着活动的逐步推进,将会有更多超高清大屏矗立在全国各大城市地标,众多优质超高清4K/8K视频内容通过大屏进行展播,一场视觉盛宴就要来临。IHAIBI(海比)做为百城千屏的头部公司,扎根城市屏联播系统多年,目前拥有城市大屏联播系统、城市公交联播系统、城市楼宇联播系统、城市出租车顶灯联播系统等智慧城市中的城市智屏联播。公共大屏是普及超高清视频的一扇窗超高清视频是继视频数字化、高清化之后的新一轮重大技术革新,能够给观看者带来全新的沉浸式体验。加快发展超高清视频产业,对满足人民日益增长的美好生活需要、驱动以视频为核心的行业智能化转型、促进我国信息产业和文化产业整体实力提升具有重大意义。今年5月9日,“百城千屏”8K超高清视频落地推广活动在2021世界超高清视频产业发展大会上正式启动。而早在2019年2月,工信部、国家广播电视总局和中央广播电视总台三部门就联合印发了《超高清视频产业发展行动计划(2019—2022年)》,计划到2022年,我国超高清视频用户数达到2亿,超高清视频产业总体规模超过4万亿元。据了解,本次“百城千屏”超高清视频落地推广活动,以“点亮百城千屏,炫彩超清视界”为主题,支持有条件的城市设立超高清公共大屏,通过展播社会主义核心价值观、党的建设、北京冬奥会、文化旅游等优质超高清4K/8K内容,弘扬民族精神,呈现中国文化,提升超高清视频产业的渗透性。赛迪研究院电子信息研究所所长温晓君向《中国电子报》记者介绍了开展“百城千屏”活动的两个背景。首先是8K技术验证和应用加速落地。按照《超高清视频产业发展行动计划(2019—2022年)》中“4K先行、兼顾8K”的总体技术路线,一批国产8K摄像机、监视器、编码器、5G转播车等设备验证成熟;中央广播电视总台开通了8K超高清试验频道(为期1个半月),对2021年春晚等进行了8K直播,正在加速推动8K正式频道上线开播。其次,重大活动为超高清视频产业的发展提供了难得机遇。超高清视频的主要应用场景为“4K进家庭,8K进公共场所”,而公共场所大屏能够更好地展现8K视频的画质优势。通过在多个城市设立公共8K大屏,展播北京冬奥会等重大活动及其他优秀8K内容,推动8K终端普及,丰富8K内容供给,带动超高清视频产业链各环节协同发展,营造良好的产业发展环境。温晓君表示,通过开展“百城千屏”活动,一是可以普及公众对超高清视频的认知。以内容展示带动音视频全产业链条向8K迭代,释放夜经济、网红经济内需活力,繁荣消费市场。二是可以丰富8K内容供给。打造超高清视频标志性商业应用样板,形成运营模式并复制推广。三是可以推动HDR高动态范围、AVS视频编码等自主标准应用与迭代,形成端到端技术标准体系,打造产业竞争制高点。加速发展超高清视频产业需各方一起发力根据《通知》,“百城千屏”超高清视频落地推广活动将按照政府引导、市场运作、多方联动、提速发展原则,发挥超高清视频龙头企业和行业组织主体作用,探索形成可复制、可推广的新业态、新模式,丰富应用场景,深入推动信息消费全面升级,培育发展新动能,完善产业链,营造良好产业生态环境,加速推动超高清视频在多领域的融合创新发展。今年6月份,在工信部和安徽省人民政府主办的2021世界显示产业大会上,《“百城千屏”首批公共大屏接入候选名录》公布,包含了来自北京、上海、广州、深圳、惠州、成都、重庆、杭州、无锡、宁波、贵州、遵义、昆明、长沙、武汉、福州、郑州、呼和浩特、沈阳、哈尔滨等20个城市的28个公共大屏。同时,22家8K LED显示屏制作商名录也被公布。据悉,四川作为全国超高清视频产业链最全的省份,早已率先开启了在城市重要商圈、网红地标、文化场馆等建设超高清户外大屏的探索,以更好地把握超高清视频技术代际演进战略机遇,推动超高清视频内容建设和终端普及。四川省超高清视频产业联盟秘书长王越向《中国电子报》记者表示,四川省超高清视频产业联盟为响应六部委发出的“百城千屏”活动,在四川省相关政府部门的支持下,拟开展四川省内“十城百屏”8K超高清视频落地推广活动,后续将在成都、绵阳、德阳、眉山等10个城市的主要商圈广场、交通枢纽、旅游景区等进行落地推广,输出四川造、川酒、川茶、川菜美食,扩大四川影响力。超高清视频产业的发展,离不开终端厂商、网络设备商、电信运营商、内容制作商等产业链上下游企业的通力协作。在今年6月公布的首批公共大屏接入候选名单及8K LED显示屏制作商的名单中,国内LED显示屏供应厂商雷曼光电入选其中。雷曼光电董事长李漫铁向中国电子报记者表示,公司作为超高清视频解决方案提供商,可以通过“软件+硬件+内容”的一站式服务为百城千屏活动提供支撑。据了解,雷曼光电参与建设了中国超高清数字纪实影像馆8K COB超高清显示屏等多个超高清显示屏项目,并且通过2021年8K春晚直播、首届WUVIC超高清电竞大赛直播等8K直播活动,让普通民众有机会感受沉浸真实的8K视效,收获优质的超高清视觉体验。中央广播电视总台相关负责人告诉《中国电子报》记者,在本次“百城千屏”活动中,总台负责开展8K超高清内容播出试验,提供北京冬奥会等重大活动及其它优质8K直播内容,提供8K技术标准咨询和技术支撑服务。在北京冬奥会期间,总台还将首次采用8K超高清数字转播技术,通过总台8K超高清电视频道和“百城千屏”项目,为大众提供8K超高清冬奥观赛体验,实现“科技冬奥·8K看奥运”的目标。“通过8K超高清‘百城千屏’落地活动,一方面,可以促进优秀8K内容推广和播出,进一步繁荣文化产业市场,讲述中国故事、彰显中国精神,能够充分发挥文化宣传作用;另一方面,通过公共区域大屏播出运营,可以带动企业加大研发和制作投入,带动高质量、创新发展,加速推动超高清视频在多领域的融合创新发展。”该负责人说。未来,随着“百城千屏”活动的推动,我国新一代信息技术产业和文化产业整体实力将得到提升;同时,观众们也可以在全国各大城市的重要商圈、大型综合交通枢纽、网红地标、文化场馆等地享受超高清大屏所带来的视觉盛宴。“一花独放不是春,百花齐放春满园。”王越表示,作为五大战略新兴产业的超高清视频产业具有非常广阔的发展前景,但需要大家协同创新、开放共享,促进超高清视频产业的发展。

超高清:六部门百城千屏推广,冬奥会全程4K直播关注原因:中线,工信部、中宣部、交通部等六部门决定开展“百城千屏”超高清视频落地推广活动,促进我国新一代信息技术产业和文化产业整体实力提升。1、事件驱动:“百城千屏”推广内容:在2021年10月—2023年6月,支持产业基础较好、有意向的城市先行先试,形成可复制可推广的活动模式。鼓励在城市重要商圈、大型综合交通枢纽、网红地标、文化场馆等地改造或新设超高清大屏。鼓励终端厂商、网络设备商、电信运营商、内容制作商等产业链上下游企业,为活动开展提供产业支撑。2、北京冬奥会超高清直播10月11日,中央广播电视总台发布消息,央视总台奥林匹克频道即将开播上线,以CCTV16为呼号。这个全新开播的频道,将是全球首个24小时上星播出的4K超高清体育频道。按照此前计划,北京将实现2022年冬奥会4K全程直播、8K实验直播。根据中国政府采购网的相关信息,7月21日,中央广电总台8K/4K冬奥会转播系统相关设备已经开始招标。3、超高清视频(UHD)是新一代视频具有4K(3840*2160像素)或8K(7680*4320像素)分辨率,符合高帧率、高位深、广色域、高动态范围等技术要求。仅参照4K分辨率,就是视频常见1080P高清画面分辨率的4倍;高帧率将提升视频图像的流畅度,使人眼感受更加舒适;高色深和广色域能够显示出更加丰富的颜色变化,使得画面更加贴近自然色;超高清视频将会给消费者带来颠覆性的视觉体验,提高浸入性和真实感。4、我国发展超高清的意义工信部部长肖亚庆表示:加快发展超高清视频产业,能够直接带动制播设备、终端产品、显示面板、芯片等产业链整体换代,促进数字技术创新突破,拉动“双千兆”新型基础设施建设,促进内容繁荣和应用创新,形成万亿级新兴产业集群,对于推动构建以国内大循环为主体、国内国际双循环相互促进的新发展格局,具有重要意义。5、超高清产业链(1)主要分为设备层、服务层和应用层三个层次,设备层主要提供硬件设备的生产制造,包括视频生产、网络传输及终端应用设备生产;服务层主要为超高清视频平台提供服务;应用层主要指超高清视频与各行业应用场景相融合形成的新业态,包括智能家居、医疗健康、智慧交通等。按照TOP50企业分布情况来看,我国超高清视频行业头部企业集中于广东和北京,50家企业中分别有17家和14家位于广东和北京,合计占比超过60%。(2)核心元器件供应商有豪威科技、兆易创新、京东方等;核心设备供应商包括海康威视、大华、中国移动、海信视像、银河电子等;服务与应用层企业则包括网宿科技、阿里云、达华智能、视源股份、4K花园、华为、京东方等(信达证券)。6、超高清政策扶持,市场空间广阔2020年,我国超高清视频的生产、网络传输、终端呈现、核心元器件、视频服务等环节直接的销售收入超过了8500亿元,带动垂直行业硬件销售和应用规模超过了9300亿元,总规模达到了1.8万亿元。根据我国《超高清视频产业发展行动计划(2019-2022年)》,预计2022年,超高清视频产业规模将达到4万亿元。7、5G快速发展为超高清视频行业赋能目前我国已经进入了5G的快速发展期,工信部预计,到2023年,我国5G个人用户普及率将超40%,用户数超过5.6亿。5G具有大流量、高速率、低时延的特点,符合超高清视频对数据传输的需求,5G能够提供更快速地上网体验,为超高清视频提供流畅的传输,满足对视频传送安全性的保障。5G+超高清视频,能够丰富业务场景,随着4/8K在教育、医疗、家居、广播等领域应用的快速推进,超高清视频行业将迎来黄金发展期。8、阿里云助力助力广电“5G+超高清”持续升级10月19日阿里云栖大会上,阿里将发布最新的开发平台和业务场景,还构建了全新的智能媒体中台,帮助一站式超高清制播能力。在2021年东京奥运会上阿里就基于OBSCloud技术在转码、剪辑、处理等环节实现全面数字化,使现场工作人员减少27%,避免占地较大的传输、存储设备,缩小场地面积25%。伴随即将到来的2022年北京冬奥会,预计在线超高清直播等将迎来新一轮产业加速推进。