突如其来的新冠疫情,让各行各业被迫体验了线上的运营模式,世界各地的高校全部启用了新的教学方式,以适应部分或所有无法正常上课学生的需求,其中最受关注的莫过于中国上线的三亿名教育工作者。学校和学生们比以往任何时候更迫切寻找替代传统授课和学生上课方式的方法。全国领先的教育机构,目前正在追求一种HybridFlexible(混合灵活式,简称HyFlex)模式进行教学的课程。HyFlex,即一种线上线下混合的教学方式,它可以为师生提供良好的教学互动平台,不仅弥补了传统教学的不足,也为学生学习提供了时间上和地点上的灵活性。老师可以同时教授现场的学生和在线的学生(同步/混合),并支持课程录制,学生可以按需观看录制的课程内容(异步/灵活)。ATOLNA高校一站式灵活混合教室解决方案,构建全新教学体验,让不同地方的学生群体都可以获取平等的机会,接受同等质量的教学。01需求评估目的创建一个教室AV系统,支持同步现场直播和在线教学,以及按需观看的录像显示具有足够图像大小和亮度的天花板或壁挂式投影仪,在各种照明条件下提供关键的观看效果信号源用户的笔记本或房间的PC机摄像机提供捕捉教师教学的视频用于直接授课和学生在课堂的参与音频提供麦克风,以便捕捉讲师和课堂音频,以及在整个教室音频分配控制全面的AV控制,操作简单,只需最少的培训线缆为网络和HDBaseT延长选择适当的类别(双绞)布线系统02AV路由和延长ATLONA AT-OME-MS42矩阵切换器和USB连接。此外,还为房间摄像头和音频数字信号处理器(DSP)提供USB外设连接。OME-MS42同时提供HDMI输出的教学内容到教师的信号监视器。OME-MS42HDBaseT 输出连接到ATLONA AT-OME-EX-RX接收器,并支持通过单屏蔽6A类电缆将各种信号延长到330英尺(100米),这包括从笔记本电脑或房间PC给投影仪的视频内容、投影仪的控制信号,以及ATLONA AT-HDVS-CAM PTZ云台摄像机专用的USB数据。03USB集成当需要传输课堂学生的信号视频时,ATLONA AT-USB-EX100-KIT USB2.0延长器可将第二个HDVS-CAM USB信号输出到OMEMS42。USB集成是该解决方案的关键元素,为HyFlex在常见视频会议应用程序(如Zoom或Microsoft®Teams®)中提供必要的音频和视频功能。该软件允许选择讲师的麦克风和摄像机进行直接指导,或房间麦克风和摄像机进行课堂和在线学生之间的小组讨论。AT-OME-MS42内置的USB主机切换功能允许所有USB外设根据需要路由到笔记本电脑或房间PC主机。会议软件的记录功能允许创建会话文件并上传到学习管理系统,以便后续按需使用。04PTZ云台摄像机ATLONA AT-HDVS-CAM系列云台摄像机提供对视频流捕获和帧速率的精确控制。讲师在教室里随意演讲地点,在讲台上、展示/投影图像前或在白板前,自动化云台支持同时捕捉讲师教学和书面内容。当讲师在房间里走动时,控制系统会指示摄像机调用位置优化的预设。05控制系统ATLONA AT-VTP-800触摸面板上的直观图形用户界面(GUI),提供了便捷的AV控制系统功能。ATLONA AT-VGW-HW-3 Velocity硬件网关作为系统的中央控制处理器,通过网络连接,网关从触摸面板、BYOD智能手机或平板电脑接收用户输入,并指示切换器向投影仪发送电源命令,选择源输入,调整音频设置,并为教师或教室摄像头选择预设或PTZ云台功能。06音频传输第三方数字信号处理器专门用于HyFlex系统的音频路由,讲师和房间麦克风作为USB设备呈现给会议软件。来自OME-MS42的计算机和教师麦克风音频通过DSP传输到ATLONA AT-GAIN-120功放,该放大器为安装在天花板上的扬声器提供高达120瓦的功率。07布线和连接PANDUIT非屏蔽6A类电缆系统通过以太网向连接的AV设备提供局域网数据和电源,屏蔽6A类电缆用于HDBaseT连接。
江苏省广播电视总台(集团)成立于2001年6月,以”责任塑造形象,品质成就未来”为办台理念,五次入选全国“文化企业30强”,连续17年入选“中国500最具价值品牌排行榜”,品牌影响力和综合实力位居全国省级广电前列。江苏省广播电视集团有限公司“云+边缘”智能内容管理服务系统是县融省级技术平台的扩展,为省域内县级融媒体中心及其他租户的融媒体内容资源交换及管理提供支持,为平台用户提供了完整的媒体内容管理功能和智能服务。整个项目采用云原生技术,引入云容器集群管理对系统平台框架进行管理,引入智能服务、大数据服务,提升平台框架健壮性的同时,增强扩展能力、业务支撑能力,以便适配灵活多变的融媒业务开展。1.公有云架构本次项目基于公有云架构模式进行,并且可在公有云、私有云和混合云等新型动态环境中建立可运营的应用服务和内容服务,并将一省一平台的可管可控纳入建设基础。2.云原生设计本次建设采用云原生技术,通过云容器引擎,提供高性能可扩展的容器服务,基于云主机快速构建高可靠的容器集群,兼容Kubernetes及Docker容器生态,支持轻松创建和管理多样化的容器应用,并提供容器故障自愈,监控日志采集,自动弹性扩容等高效运维能力,从而实现容器集群的编排、交付、管理。3.自研AI算法针对本次项目的构建目标和应用场景,基于弹性调度框架,荔枝云自研针对广电行业应用的各种AI算法,包括不局限于命名实体识别、关键字提取、新闻文本分类、新闻摘要、字幕识别、镜头语言识别、人脸识别等,并通过统一接口提供服务,让业务应用按需选择,快速集成AI能力,快速对外输出不同的智能化功能和服务,以最大限度地适应当前媒体行业的融媒体建设的多样性、可扩展性的要求。4.智能媒资本次项目建设中使用的荔枝云自主研发的媒资系统,以AI应用颠覆传统媒资功能,不再只是具备归档、编目等简单功能,使媒资向平台化演进,从真正意义上实现媒资系统的运营化、智能化。
上海文化广播影视集团有限公司(SMG)在媒资管理系统的构建过程中,通过引入人工智能及互联网技术,形成了一个具备自动编目、媒资百科、知识图谱、自动主题推荐等功能的“新型广播电视媒资生产管理平台”。该平台帮助SMG 实现媒资内容衍生产品的自动化和智能化生产,使其从传统档案管理型媒资向生产服务型媒资转变。【关键词】人工智能,媒资管理,自动编目,知识图谱,隐性水印0 引言媒体资产管理的概念从提出至今已经数十年,传统广播电视媒资管理理念及系统构建如今已非常成熟。但是,在传统的构建理念下,广播电视媒资系统长期存在着一些难以解决的痛点,严重制约了系统的使用效能:第一,传统广播电视媒资的海量内容长期沉淀于系统中,缺乏内容产品的深度开发,从而造成媒资素材使用效率整体低下;第二,传统媒资管理通常自成封闭体系,缺少与外部实时资讯的联动,对于新媒体时代的节目内容快速生产模式缺乏有效响应;第三,基于人工编目的元数据生产模式生产效率低、成本高、主观性强,无法满足全媒体资讯的大规模、快速生产需要。SMG 基于AI 的媒资内容管理平台是传统广电行业在AI技术应用上的一次成功实践,通过在媒资管理各主要业务流程中引入人工智能及互联网技术,构建起一个具备自动编目、媒资百科、知识图谱[1]、自动主题推荐等功能的“新型广播电视媒资生产管理平台”。该平台帮助SMG 实现了媒资内容衍生产品的自动化和智能化生产,有效解决了传统媒资管理中的长期缺陷,使SMG 得以从传统档案管理型媒资向生产服务型媒资转变。1 系统的设计与实现1.1 总体架构设计基于AI 的媒资内容管理平台通过综合应用互联网、人工智能等最新IT 技术对现有媒资管理业务进行重新定义,对系统的性能和未来的横向扩展性具有较高的要求,传统的系统部署方案不利于大规模业务数据计算或者业务的快速扩展。因此,在系统设计中,通过SMG 自主构建的IT 基础资源平台作为系统的底层技术架构平台,发挥该平台在计算弹性、资源扩展性等方面的系统优势,对IaaS、PaaS、SaaS 层的资源服务进行统一设计,从而构建出一个完整的、符合现在及将来业务拓展需求的高标准的基于AI 技术的广播电视媒资生产管理平台,如图1 所示。1.2 业务流程设计系统以媒资智能检索为核心,提供了互联互通回调、自动编目、媒资百科生产、自动水印、维权检测、专栏专题等主要业务功能,分别面向SMG 全台记者编辑和媒资管理部门用户,为他们提供不同业务场景下的各项具体功能,如图2 所示。1. 媒资智能检索媒资智能检索是平台的核心功能之一,主要提供记者编辑对SMG 各系统中的节目内容、素材、媒资词条、节目介质等进行统一的检索和展现。用户通过系统提供的全文检索框实现对节目资料的统一检索,检索结果可根据需要进行分类展示,并且结合知识图谱功能,对检索结果中的相关词条以及词条的知识图谱进行展示,从而向用户提供基于媒资内容的智能推荐。针对检索的内容如果有视频信息用户可以提出回调申请,回调流程在媒资各业务系统中最终实现。2. 互联互通回调为了满足媒体管理中的素材一站式回调需求,在确保系统安全性的前提下,项目组设计了符合广播电视媒资管理特点的互联互通传输系统,在基于AI 技术的广播电视媒资生产管理平台的指挥调度下,利用安全传输网关,将各媒资系统的节目文件传输到相应的目的地(各制作系统及办公网公共存储)。3. 自动编目管理系统在设计中,通过使用语音识别、OCR 识别等人工智能技术,对媒资内容进行快速、自动编目。对于一些画面、声音质量较好的节目素材,尤其是批量的时长较长的节目素材,可实现超远人工的高效、全面的信息编目。同时,由于系统设计时将自动编目数据和人工编目数据并存于媒资数据库中,在资料检索时可同时进行检索和展现,一方面丰富了系统的检索内容,另一方面有效提升了全文检索的准确度和素材的召回率。4. 媒资百科生产项目通过构建基于媒资素材的媒资百科体系,将媒资素材层级的编目标注进一步提升至主题层级的知识加工,并且在媒资百科生产流程中引入了互联网热点关联分析、一键生成知识图谱等创新功能,从而使媒资百科生产模式向半自动化的批量化生产发展,大幅提升了主题知识加工的效率和准确度。5. 自动水印管理平台融合了最新的视频水印技术,主要应用于对视音频等数字内容产品的版权提供保护。针对高码内容资源,加入隐性水印,记录版权所属、分发渠道等信息,视频经压缩,调色,缩放,剪辑、转码等操作后仍旧能够准确无误提取出其中的水印信息,达到版权追溯效果;针对低码内容资源的下载,加入显性术印,方便地实现新媒体发布的同时对盗版行为起到警示作用。两种水印保护措施相互配合,为全媒体覆盖的版权保护和盗版跟踪提供了有效的手段6. 维权监测自动检测模块将基于现有的版权维护流程,将人工记录和归档方式,转换成高效的电子化操作。通过SMG 维权管理子系统设计将通过互联网,与律所、监测方多方合作完成对版权资产的维权保护,并将信息与媒资版权相关业务进行整合展现。同时,利用隐性水印的解码,实现对已加嵌隐性水印的珍贵素材进行版权检测,确认素材的版权所属、素材的流出途径等。2 关键技术与创新2.1 媒资百科及知识图谱SMG 基于AI 的媒资内容管理平台在广播电视媒资管理领域,首创了媒资百科、知识图谱等媒体内容产品,并实现大规模半自动化生产。具体实现上,通过智能语义分析和关联技术完成音视频资源的快速聚合,形成媒资百科,并在媒资百科生产过程中自动采集互联网知识数据,对不同来源数据的结构化处理,提取实体信息,并通过算法计算实体间的关联关系,最终生成媒资知识图谱。AI 技术的运用,更是将媒资百科生产从纯人工生产方式向半自动化生产转变,提升了生产效率,快速扩充SMG 媒资百科词条数据,为终端节目制作提供基于媒体内容资源的知识服务。2.2 自适应嵌入强度的视频隐性水印技术基于改进的DT-CWT 算法[2],自主研发隐性水印技术,利用图像处理,密码学和计算机技术对视频进行分帧处理,通过变化域的嵌入保证了水印的安全性,同时利用人眼不敏感的第三层高频子带嵌入保证了水印的隐蔽性,进而较少地损失了视频的质量。同时,嵌入的水印有较好的鲁棒性,可以抗多种视频编码格式的转码,以及视频码率的压缩,画面的调色和裁剪等,为全媒体覆盖的版权保护和盗版跟踪提供了有效的手段。2.3 基于人工智能的媒资素材智能编目平台利用AI 识别技术所架构的智能媒资编目系统年产量可达3 万小时,大幅降低了媒资编目的人力成本。同时,系统将自动编目结果与媒资素材检索、媒资主题推荐等业务流程相结合,进一步为记者编辑提供基于人工智能的智能媒资服务。在智能媒资编目的具体实现过程中,我们将每台设备、每个应用模块都进行了标准化处理,即:只要确保应用模块基本属性一致,可由不同的程序开发语言或第三方应用替换,随时更换所需的应用模块。这种应用模块的标准化构建技术理念,对于今后自动编目功能的扩展、技术更新提供了充分的空间。2.4 高性能分布式全文检索系统由于系统涉及SMG全台广播电视媒资内容的生产和调用,对实时检索能力和容错能力有非常高的要求,项目组以Solr和Zookeeper 为核心,构建了一组完整的分布式全文检索系统,以确保检索性能。针对媒资内容多层级、多系统来源的特点,项目组分别从排序策略、分词器、词库更新等多个维度对检索系统进行整体调优: (1) 在排序策略上,通过使用Solr的edismax实现的方法,构建自定义评分器,优化boost 评分。(2)采用针对Lucene 全文检索优化的查询分析器IKQueryParser,采用歧义分析算法优化查询关键字的搜索排列组合,从而极大提高检索的命中率。(3)集中管理词库文件,在各个Solr 节点,定时从数据库或缓存里读取并更新(在IKAnalyzer 源码的Dictionary 类中进行更新),从而保证整个检索集群只需维持一份词库文件,而且可以支持结合本地词库+ 数据库的方式一起工作,为分词词库的扩展提供了可行性。3 实际效益基于AI 技术的广播电视媒资生产管理平台汇聚了SMG百万小时的媒体内容资产信息,面向SMG 全台用户,覆盖传统和新媒体节目制作,提供了一站式媒资生产管理服务:一方面,系统提供的基于AI 技术的智能编目已用于大批量素材的日常编目工作,年节约编目成本约600 万元,同时还被应用至唱词翻译、场记速记等节目生产领域,产生了额外经济效益;另一方面,系统所提供的自动水印方案,为SMG 新媒体节目分发和素材交易提供了有效的版权保护手段。平台上线运行以来先后支撑了博鳌亚洲论坛峰会、改革开放40 年等重大宣传报道任务,发挥了突出的作用。4 结束语人工智能技术的应用和普及对于传统广播电视内容生产效率的进一步提升具有显著促进作用,其关键在于解决技术创新与业务流程的适配,从而带动业务模式的变革与创新。SMG 在媒资管理系统的构建过程中,通过引入人工智能及互联网技术,形成了一个具备自动编目、媒资百科、知识图谱、自动主题推荐等功能的“新型广播电视媒资生产管理平台”。该平台帮助SMG 实现媒资内容衍生产品的自动化和智能化生产,使其从传统档案管理型媒资向生产服务型媒资转变。平台将人工智能技术与广播电视媒资生产管理实际业务相结合,实现了降本增效,提升了服务水平,成为人工智能技术在广电行业成功应用的范例。同时,通过自主研发的隐性水印技术,首次在行业内实现节目素材版权的追踪保护,对于完善我国自主创新的数字版权管理生态体系也具有积极的推进作用。
近日,工信部、中宣部、交通运输部、文化和旅游部、国家广播电视总局、中央广播电视总台等六部门联合印发了《关于开展“百城千屏”超高清视频落地推广活动的通知》(以下简称《通知》)。随着活动的逐步推进,将会有更多超高清大屏矗立在全国各大城市地标,众多优质超高清4K/8K视频内容通过大屏进行展播,一场视觉盛宴就要来临。IHAIBI(海比)做为百城千屏的头部公司,扎根城市屏联播系统多年,目前拥有城市大屏联播系统、城市公交联播系统、城市楼宇联播系统、城市出租车顶灯联播系统等智慧城市中的城市智屏联播。公共大屏是普及超高清视频的一扇窗超高清视频是继视频数字化、高清化之后的新一轮重大技术革新,能够给观看者带来全新的沉浸式体验。加快发展超高清视频产业,对满足人民日益增长的美好生活需要、驱动以视频为核心的行业智能化转型、促进我国信息产业和文化产业整体实力提升具有重大意义。今年5月9日,“百城千屏”8K超高清视频落地推广活动在2021世界超高清视频产业发展大会上正式启动。而早在2019年2月,工信部、国家广播电视总局和中央广播电视总台三部门就联合印发了《超高清视频产业发展行动计划(2019—2022年)》,计划到2022年,我国超高清视频用户数达到2亿,超高清视频产业总体规模超过4万亿元。据了解,本次“百城千屏”超高清视频落地推广活动,以“点亮百城千屏,炫彩超清视界”为主题,支持有条件的城市设立超高清公共大屏,通过展播社会主义核心价值观、党的建设、北京冬奥会、文化旅游等优质超高清4K/8K内容,弘扬民族精神,呈现中国文化,提升超高清视频产业的渗透性。赛迪研究院电子信息研究所所长温晓君向《中国电子报》记者介绍了开展“百城千屏”活动的两个背景。首先是8K技术验证和应用加速落地。按照《超高清视频产业发展行动计划(2019—2022年)》中“4K先行、兼顾8K”的总体技术路线,一批国产8K摄像机、监视器、编码器、5G转播车等设备验证成熟;中央广播电视总台开通了8K超高清试验频道(为期1个半月),对2021年春晚等进行了8K直播,正在加速推动8K正式频道上线开播。其次,重大活动为超高清视频产业的发展提供了难得机遇。超高清视频的主要应用场景为“4K进家庭,8K进公共场所”,而公共场所大屏能够更好地展现8K视频的画质优势。通过在多个城市设立公共8K大屏,展播北京冬奥会等重大活动及其他优秀8K内容,推动8K终端普及,丰富8K内容供给,带动超高清视频产业链各环节协同发展,营造良好的产业发展环境。温晓君表示,通过开展“百城千屏”活动,一是可以普及公众对超高清视频的认知。以内容展示带动音视频全产业链条向8K迭代,释放夜经济、网红经济内需活力,繁荣消费市场。二是可以丰富8K内容供给。打造超高清视频标志性商业应用样板,形成运营模式并复制推广。三是可以推动HDR高动态范围、AVS视频编码等自主标准应用与迭代,形成端到端技术标准体系,打造产业竞争制高点。加速发展超高清视频产业需各方一起发力根据《通知》,“百城千屏”超高清视频落地推广活动将按照政府引导、市场运作、多方联动、提速发展原则,发挥超高清视频龙头企业和行业组织主体作用,探索形成可复制、可推广的新业态、新模式,丰富应用场景,深入推动信息消费全面升级,培育发展新动能,完善产业链,营造良好产业生态环境,加速推动超高清视频在多领域的融合创新发展。今年6月份,在工信部和安徽省人民政府主办的2021世界显示产业大会上,《“百城千屏”首批公共大屏接入候选名录》公布,包含了来自北京、上海、广州、深圳、惠州、成都、重庆、杭州、无锡、宁波、贵州、遵义、昆明、长沙、武汉、福州、郑州、呼和浩特、沈阳、哈尔滨等20个城市的28个公共大屏。同时,22家8K LED显示屏制作商名录也被公布。据悉,四川作为全国超高清视频产业链最全的省份,早已率先开启了在城市重要商圈、网红地标、文化场馆等建设超高清户外大屏的探索,以更好地把握超高清视频技术代际演进战略机遇,推动超高清视频内容建设和终端普及。四川省超高清视频产业联盟秘书长王越向《中国电子报》记者表示,四川省超高清视频产业联盟为响应六部委发出的“百城千屏”活动,在四川省相关政府部门的支持下,拟开展四川省内“十城百屏”8K超高清视频落地推广活动,后续将在成都、绵阳、德阳、眉山等10个城市的主要商圈广场、交通枢纽、旅游景区等进行落地推广,输出四川造、川酒、川茶、川菜美食,扩大四川影响力。超高清视频产业的发展,离不开终端厂商、网络设备商、电信运营商、内容制作商等产业链上下游企业的通力协作。在今年6月公布的首批公共大屏接入候选名单及8K LED显示屏制作商的名单中,国内LED显示屏供应厂商雷曼光电入选其中。雷曼光电董事长李漫铁向中国电子报记者表示,公司作为超高清视频解决方案提供商,可以通过“软件+硬件+内容”的一站式服务为百城千屏活动提供支撑。据了解,雷曼光电参与建设了中国超高清数字纪实影像馆8K COB超高清显示屏等多个超高清显示屏项目,并且通过2021年8K春晚直播、首届WUVIC超高清电竞大赛直播等8K直播活动,让普通民众有机会感受沉浸真实的8K视效,收获优质的超高清视觉体验。中央广播电视总台相关负责人告诉《中国电子报》记者,在本次“百城千屏”活动中,总台负责开展8K超高清内容播出试验,提供北京冬奥会等重大活动及其它优质8K直播内容,提供8K技术标准咨询和技术支撑服务。在北京冬奥会期间,总台还将首次采用8K超高清数字转播技术,通过总台8K超高清电视频道和“百城千屏”项目,为大众提供8K超高清冬奥观赛体验,实现“科技冬奥·8K看奥运”的目标。“通过8K超高清‘百城千屏’落地活动,一方面,可以促进优秀8K内容推广和播出,进一步繁荣文化产业市场,讲述中国故事、彰显中国精神,能够充分发挥文化宣传作用;另一方面,通过公共区域大屏播出运营,可以带动企业加大研发和制作投入,带动高质量、创新发展,加速推动超高清视频在多领域的融合创新发展。”该负责人说。未来,随着“百城千屏”活动的推动,我国新一代信息技术产业和文化产业整体实力将得到提升;同时,观众们也可以在全国各大城市的重要商圈、大型综合交通枢纽、网红地标、文化场馆等地享受超高清大屏所带来的视觉盛宴。“一花独放不是春,百花齐放春满园。”王越表示,作为五大战略新兴产业的超高清视频产业具有非常广阔的发展前景,但需要大家协同创新、开放共享,促进超高清视频产业的发展。