首页 » 内容管理 » 数字存储使大流行期间的后期制作成为可能

数字存储使大流行期间的后期制作成为可能


提醒我

汤姆·科夫林(Coughlin Associates)

Covid-19大流行已促使许多后期制作组织移至远程工作。 这导致媒体内容的存储方式发生了变化。 一个重要因素是,无论是从私有数据中心还是通过超大规模云存储供应商,对云存储的依赖性都更高。 在本文中,我们将研究对后期制作存储整体增长的预测,然后是2020 IBC,2020年的产品和见解 NAB展会 纽约和各种公司简介会,将帮助后期制作设备继续运行,控制其成本并提高生产率。

下图显示了后期制作的存储容量的年度需求,包括NLE,突破了直接附加和网络附加的后期制作存储容量[1]。 我们为协作工作流提供了一个单独的远程(云)存储突破口。 请注意,由于Covid-19大流行,到2020年大部分时间和2021年很可能会有很多人在家工作,我们预计从2020年到2019年,将云存储用于后期制作的比例将大大提高(从8%到20年)分别为2025%),并在XNUMX年之前持续增长。

随着后期云存储的增长,我们将首先关注将云存储纳入各种供应商的媒体和娱乐工作流程中的发展。 

用于远程后期制作的云存储

狂热Nexis 2020存储解决方案可在富媒体上的任何位置提供协作工作流。 它还使用更高容量的HDD在相同的占地空间中提供40%的共享存储,优化内容镜像以消除停机时间和数据丢失,并结合了本地和云资源的灵活存储分层。 它还为第三方工具提供了更广泛的支持。

在后期制作工作流程中使用云的兴趣正在增长。  狂热 在Covid-2020大流行之前,他们于19年对客户进行了调查,发现只有20%的客户不打算使用云存储,而40%的客户表示将使用少于100TB,30%的客户表示将使用云存储。 0.5-1PB和10%的人表示他们将使用超过1PB的云存储。 下图显示 狂热的存储产品阵容包括 狂热 Nexis / Cloudspaces将本地集成到云存储。

狂热 还说它已经完成了跑步的软启动 狂热 虚拟机上的Media Composer以及在编辑环境中使用Kubernetes容器(可通过Teredici访问)以及Nexis云存储按需提供编辑,如下所示。

Scale Logic在此处显示了Remote Access Portal,这是一种1U Linux设备,可对代理和高分辨率工作流进行远程访问本地存储,如下所示。 请注意,可以将远程客户端本地HDD或SSD用作本地缓存,以提高性能。

同步化过程在后台发生,无需编辑器做任何事情,并且远程保存的项目会自动同步回本地存储,以便其他人可以看到更改。

的EditShare 被授予 NAB展会 2020年NAB纽约会议的年度产品奖。 该公司于2020年2020月发布了其EFS XNUMX文件系统的新版本。据该公司称,“针对媒体进行了优化的文件系统在每一层都具有安全性改进,并全面提高了性能。 除了EFS内置的强大存储管理工具之外,新的RESTful API还为客户和技术合作伙伴打开了大门,使他们可以在安全的环境中自动执行高级存储管理工作流程。 EFS与最新版本的FLOW完全兼容,使媒体组织能够建立广泛的协作工作流,使创意人员免受潜在的技术复杂性的困扰,同时为技术团队配备一套全面的媒体管理工具。”

最新版本的EFS支持包括AWS,腾讯云等在内的云工作流程。 IT经理和管理员可以对内容,文件夹结构和内容流进行细粒度控制,以实现跨多站点和多项目操作的更好的协作。

的EditShare 它还表示,通过其EFS共享存储和FLOW媒体管理解决方案,它一直在帮助广播公司和媒体公司增加其远程内容制作的输出。 该公司表示,在大流行期间,菲律宾长途电话公司(PLDT)实施了该公司的协作解决方案,以自动化50多个手动工作流程,并将远程生产内容的输出提高了40%。 下图显示了使用 的EditShare 产品及技术

Facilis 在2020年虚拟 NAB秀 纽约。  Facilis 为协作媒体制作提供高性能的共享存储。 该公司的最新发展包括8.05版的 Facilis 共享存储系统,其FasTracker媒体资产管理软件的3.6版和新的 Facilis Edge Sync用于显示的远程访问。

Facilis 共享存储版本8.05包括软件定义的带宽优先级,SSD分层和多磁盘奇偶校验。 带宽优先级在正常运行期间为所有工作站提供了完整的吞吐量,但是在服务器进入高负载条件时,优先级使其保持较高的吞吐量。 此优先级设置是动态的,可以在应用的几秒钟内影响客户端性能。

在基于项目的虚拟卷基础上,每个驱动器组最多可以启用软件定义的多磁盘奇偶校验,以实现最多4个驱动器故障。 这项技术使老化系统的所有者可以更好地保护其资产,防止由于驱动器故障而导致数据丢失。 SSD和HDD分层旨在为需要SSD级性能的项目提供专用速度,同时保持永久的基于HDD的镜像。

Facilis Edge Sync始于 Facilis 利用本机的对象云软件 Facilis 虚拟卷作为本地磁盘缓存,并添加专用的Azure Cosmos DB数据库以将多个桌面同步到一个文件系统中。 随着 Facilis 边缘节点安装在远程位置,无论您是在工厂内还是在家中工作,媒体文件和项目文件的路径都完全相同。 对项目文件的任何更改或添加都会在每个位置立即更新。 下图

Cinesite与 Qumulo 和AWS,以利用其动画和VFX管道 Qumulo的混合文件数据服务可提供多达16K的渲染视频。 面对最近购买的存储集群Cinesite方法的间歇性冻结问题 Qumulo,他迅速在现场部署了硬件节点,并使公司重新运行。

后来,为了冲向云以扩展其渲染功能,该公司 Qumulo 云存储,使组织可以启动机器并在AWS上存储数据。 一种 Qumulo 案例研究表明“Qumulo的混合文件软件在云中与本地运行相同的企业文件系统,并且数据可以在实例之间或跨区域进行本地无缝复制。 使用以下命令在AWS上爆炸至20、200甚至2,000个高质量渲染节点 Qumulo 与所有权力并驾齐驱是没有问题的。 实例可以在几分钟之内旋转起来,然后以同样快的速度拆除。 “

综合媒体技术公司(IMT)宣布,其SoDA软件已与Dalet的Ooyala Flex Media Platform集成在一起,以简化人工智能和机器学习工作流内容向云的安全传输。 IMT SoDA软件与Dalet的Ooyala Flex Media Platform的集成在美国和欧洲提供。

该联合解决方案将通过简化大型数据工作流程的传输,同时为创意内容提供简化的数据移动方法,从而满足媒体资产数据管理要求。 后期制作和媒体服务客户将能够在存储传输之前使用SoDA预测移动文件的成本和时间,从而使他们能够对数据管理做出明智的决策,并使项目成本保持在预算或预算以下。

当前的大流行经验结束后,通过远程协作工作对云的依赖将越来越高。 不论是在云端还是在本地,各种固态存储解决方案都将帮助编辑人员应对不断增长的视频内容规模,从而需要更高性能的存储,以提供这些专业人员所需的实时体验。 让我们看一下M&E行业的一些最新固态存储解决方案。

固态存储解决方案

NetApp的Cloud Manager提供策略驱动的跨多个公共云提供商和本地位置的应用程序存储和数据管理。 NetApp产品套件Spot可以为Kubernetes容器提供云基础架构分析,成本优化,容量优化和工作负载优化。 该公司的ONTAP 9.8为企业应用程序提供了增强的云集成和数据可用性。 ONTAP 9.8通过SAN,NAS和对象存储提供了混合云缓存体系结构,连续可用性和统一数据管理。

NetApp长期以来一直支持Dreamworks动画,这需要在存储容量和性能之间取得平衡。 全新的FAS500f(如下所示)是面向全闪存容量的存储阵列(原始磁盘容量高达734TB,带有扩展架),使用QLC闪存SSD提供更高的容量。 该产品具有端到端的NVMe支持,并由NetApp的ONTAP软件进行管理。 该产品面向大量非结构化数据应用,例如媒体,娱乐和动画。

在2020年IBC ATTO展示了其基于SiliconDisk RAM的高性能存储设备,其广告容量分别为128GB和512GB。 该产品使用RAM而不是闪存,以较高的价格提供更高的性能。

该产品提供小于600 ns的延迟和高达6.4M的4K IOPS,数据传输带宽高达25 GB / s。 它带有4个100 Gb以太网端口,总带宽为400 Gb。 该公司表示,“数据以惊人的速度即时存储和检索,使您可以编辑更多视频流,捕获更多AI / ML数据实例,更快地处理更多数据集并为索引查找提供令人难以置信的性能。”

SiliconDisk包含一个实时优化器,可对存储网络连接,存储利用率和整体SiliconDisk数据性能进行性能分析。 它还具有xCORE I / O加速,以几乎为零的额外处理开销处理读写。 而且,使用DRAM而不是闪存,该系统不需要管理介质磨损。

Excelero宣布DigitalFilm Tree使用其弹性NVMe存储(NVMesh)提供了10倍的渲染处理速度和100倍的存储速度。 该公司表示,“ NVMesh的软件定义的分布式块存储用于高性能计算工作负载,可以通过更好的存储为用户提供支持。 客户将受益于整个网络上共享的NVMe资源,以本地速度删除NVMe的权限-并且性能超过服务器上本地闪存的容量限制。

在NVMesh中,数据路径仅在客户端运行,在服务器端不涉及CPU周期。 对于超大规模应用而言,这特别有趣,因为没有嘈杂的邻居效应。 NVMesh架构中的一个重要组件是TOpology MAnager(TOMA),这是一个智能的群集管理组件,它提供了卷控制平面功能,并支持RAID服务,擦除编码和数据共享(在客户端计算机之间)等数据服务。 下图显示了从应用程序到NVMe存储的直接有效数据路径。

以NVMesh在工作中的示例为例, 黄金倒带:男孩里面,是Amazon Prime Video的超级英雄和警戒系列第2季的预演 男孩们,DFT的系统对其新的Excelero驱动的存储解决方案进行了测试。 生产团队需要在短短40个小时内处理10个小时的客户上载的日报,备份它们,制作快速编辑的代理,进行处理并将其交付给编辑部门。

VAST提供了所谓的数据通用存储,该存储使用 英特尔 Optane NVMe SSD作为QLC NVMe存储层的缓存层,如下所示。 该公司表示,这种存储架构可提供高性能,低成本的存储,已在动画工作室,体育联赛和广播中使用。

在IBC开始时,Cloudian宣布其HyperStore对象存储软件现已进行闪存优化,从而使企业能够满足性能密集型工作负载的需求,同时利用自适应混合架构部署基于闪存和HDD的节点,从而使客户能够减少总成本。通过将不常使用的数据分层到HDD存储,成本降低了40%。 HyperStore可以作为纯软件解决方案使用,也可以在预配置的设备HyperStore Flash 1000系列中使用。 HyperStore Flash 1000以77U的形式提供154TB和1TB的容量,如下所示。

该公司表示:“ Cloudian的新闪存优化软件在提供所需性能的同时,还提供了Cloudian企业级对象存储平台的所有优势,包括完全本机S3兼容性,行业领先的安全性和高级管理功能,例如多租户和服务质量。 经过闪存优化的HyperStore充分利用了行业标准硬件上闪存介质的减少延迟的I / O配置文件,可实现部分对象读取和低延迟数据访问。 Cloudian的平台已通过领先的NVMe供应商认证,例如 英特尔 和Kioxia和是 英特尔 Optane就绪,性能更高。”

Open Drives宣布了为其OpenDrives存储解决方案提供支持的Atlas 2.1软件平台的可用性。 新软件在该公司最近发布的Ultra Hardware平台上运行,如下所示,该平台现在在Ultimate产品中包含NVMe SSD,在Optimum产品中包含HDD。 这些以及Momentum HDD阵列产品如下所示。

Atlas 2.1具有使公司能够大规模扩展同时保持扩展性能的功能。 这些功能包括:存储群集,分布式文件系统,容器化,条件自动化,集中式管理和可见性,云存储支持以及高可用性。

通过存储群集,可以将单个向上扩展的设备或节点聚合在一起,形成一个群集。 这种并行分布式体系结构可在群集节点之间实现平衡的工作负载,而不会牺牲性能影响,例如增加的延迟。

容器化使诸如计算和应用程序本身之类的功能更接近数据在存储中的位置。 从存储的角度来看,OpenDrives接近了容器化。 该公司表示,通过这种方式,OpenDrives可以通过智能,高效地将数据传输到容器来获得巨大的性能提升。

条件自动化是容器化的补充功能,它使触发操作(例如基于时间或基于文件的操作)能够创建自动启动并独立于其他任务运行的自动化任务。 通过一个单一的窗格进行集中管理和可见性,使操作员可以洞悉存储基础架构的效率,并有助于更好地配置设置以调整节点和存储集群。

云存储支持使用户可以通过S3协议发送和接收本地和云数据,并通过本地服务消息块(SMB)共享S3远程目标。 高可用性管理操作的连续性,因此客户可以配置备用节点,这些备用节点在主设备发生故障时会激活。

云和固态存储正在改变我们处理媒体内容的方式。 但是,对于在家中或小型机构中工作的专业人员,本地存储可以提供最高的性能。 让我们看一下针对M&E应用程序的新的和更新的本地存储产品。

本地工作流存储产品

Promise Technology在2020 IBC上推出了其PegasusPro,Thunderbolt 3 DAS和NAS融合系统,旨在提高数字媒体协作中的工作流程效率。 该产品使用该公司的FileBoost技术提供从DAS到10GbE NAS的快速数据传输,反之亦然。 该公司表示,多个人可以通过Thunderbolt 3直接连接到PegasusPro,并同时通过NAS与其他团队贡献者共享他们的工作。 PegasusPro产品线如下所示。

希捷提供其EXOS HDD JBOD以及Nytro All闪存阵列。

一站式系统在2020 IBC进行了虚拟展位参观。 该公司表示,“利用PCI Express,最新的GPU加速器和NVMe存储的功能来运行要求苛刻的计算应用程序,包括最终帧渲染,大规模活动,从而为媒体,娱乐和可视化行业设计和制造高性能专业系统。可视化,实时扩展现实和AI增强了视频后期制作。 OSS产品包括业界首个基于PCIe Gen 4的渲染加速器和录像机,其带宽是现有系统的两倍,并且在单个系统中最多可包含16个NVIDIA A100 GPU。 OSS在Fly™上提供了AI,将数据中心性能带到了现场和工作室工作流程中。”

Synology在1621年IBC上宣布了其DS2020xs +。 该公司表示,“ DS1621xs +共享其他Synology数据中心设备中强大的Xeon处理器。 超过3.1 GB / s seq。 读取和1.8 GB / s seq。 写性能意味着它可以以超快的速度处理更大的数据集并处理更多的用户。 它还与ECC内存配对以提供最大的可靠性,并且与Btrfs和其他全面的数据备份选项结合使用时,用户可以确信自己的数据是安全的。” 产品如下所示。

六个内部3.5英寸HDD托架可实现高达96TB的原始存储容量。 扩展单元允许将其增加到16个托架和256TB的容量。 附加的10GbE NIC可以加快渲染项目的速度,甚至可以为多个虚拟机提供更快的传输速度。 该产品提供本地NAS服务,同时允许使用Web浏览器或移动应用程序进行远程访问。

Symply推出了针对2020虚拟IBC的升级版SymplyWORKSPACE,这是一个基于StorNext6的台式机多用户Thunderbolt 3 SAN存储系统,具有基于嵌入式AI 2020 AI的媒体资产管理,存储容量从48 TB到366 TB,如下所示。 该公司表示,该部门最多可以支持8位同时进行4K作业协作的用户,并支持远程访问,因此用户可以在家中访问其系统上的代理。 先进的RAID保护有助于保护媒体资产,固态存储的使用有助于提高整体系统性能。 轴AI在WORKSPACE Xeon处理器上的Linux虚拟机中运行。

2020年媒体和娱乐中的数字存储报告

2020年媒体和娱乐数字存储报告, Coughlin Associates提供的251页深入分析了数字存储在专业媒体和娱乐各个方面的作用。 2025个表格和62个图提供了对129年内容捕获,后期制作,内容分发和内容归档中数字存储需求的预测。

该报告得益于包括最终用户和存储供应商在内的业内许多专家的意见,这些意见与经济分析以及行业出版物和公告一起被用来创建包括在报告中的数据。 由于存储设备经济性的变化,更高性能的固态存储将在未来发挥更大的作用。 在Covid-19大流行期间,云和包括云在内的混合存储已对许多工作流程产生了新的重要性。 大流行过去后,云存储的使用将在未来的媒体和娱乐存储市场中继续增长。

您可以在这里找到更多信息并直接订购 tomcoughlin.com/product/digital-storage-for-media-and-entertainment-report/

[1] 2020年媒体和娱乐中的数字存储,Coughlin Associates, tomcoughlin.com/product/digital-storage-for-media-and-entertainment-report/

关于作者

Coughlin Associates总裁Tom Coughlin是一位数字存储分析师以及业务和技术顾问。 他在数据存储行业拥有超过39年的经验,曾在多家公司担任工程和管理职务。 Coughlin Associates咨询,出版书籍以及市场和技术报告,并进行面向数字存储的活动。 他是以下机构的常规存储和内存贡献者: forbes.com 和M&E组织网站。 他是IEEE院士,IEEE-USA的前任主席,并且在SNIA和 SMPTE。 有关Tom Coughlin及其出版物和活动的更多信息,请访问: www.tomcoughlin.com.

 


提醒我