松下PTZ摄像机AW-UE155联手DisruptAR远程打造NAB虚拟发布会

时间:2020/06/30 来源:专业视听网

关键词: 松下、PTZ摄像机、AW-UE155

NAB 2020因新冠病毒大流行而取消了,这对整个广电行业引起了冲击。NAB(National Association of Broadcasters)是全球瞩目的广电贸易展,每年在拉斯维加斯举行,有来自160多个国家的90,000多名与会者。1,600家参展商大多会带来新产品、新技术。对于许多大型公司来说,甚至要提前半年为NAB进行规划。

而今年, Panasonic专业影像团队不得不在很短的时间内琢磨出一些替代方案,以便在家中远程工作、发送讯息。

在预判NAB有可能取消的日子里,Panasonic团队开始探索,包括建立一个实体展台供客户在线访问的想法。Panasonic专业影像团队还与专门创建虚拟制作的DisruptAR首席执行官Paul Lacombe进行了讨论。DisruptAR公司专注于虚拟影像领域,并追求降低AR和VR的制作成本。

3月16日,松下美国总部所在的新泽西州正式进入封闭状态;

3月18日,Lacombe为松下团队安排了首次演示;

3月20日,NAB 2020正式宣布取消。

时间紧,任务急。

松下技术工程师哈里·帕特尔(Harry Patel)透露:“我们必须在两个选项之间快速做出决定。第一个是搭建一个实体展位,在符合社交安全距离的规定下展示产品(一次少于10人),还得邀请摄制组。很明显,这不切实际。但,即使不能走出家门,我们也想做更高品质的展示。因此,关于虚拟直播的提案得到了进一步讨论,并于3月底获得批准。”

DisruptAR的Paul Lacombe使用Free-D协议在家中进行了虚拟演示。

远程制作的挑战

远程制作并非一个新概念。1982年,导演弗朗西斯·福特·科波拉(Francis Ford Coppola)出色地导演并剪辑了他的电影《旧爱新欢》(One From the Heart),其中的许多场景就是在布景附近的拖车中进行的。但是,全球疫情期间,在家里进行远程制作则是另一回事。只有使用非常先进的拍摄技术、VR引擎和基于云的应用程序才有可能成功。

对于Panasonic,首要课题是创建清晰的规划架构,并将口头和书面沟通转换为更可视的视频方式。在以往NAB展会上,销售人员通常会在展厅与客户交流,讨论用户的问题及解决方案。营销经理Jim Wickizer和Racepoint Global公关公司最终统一了规划方案,并与每位产品经理确认了话题的重点。

Patel和Wickizer从他们的家庭工作室与Lacombe开始进行远程合作、与主持人Zoe Laiz进行视频采访。

“我们所有人都面临着具有挑战性的制作环境,但要按时间表进行远程制作,这绝对是概念上的飞跃。”Lacombe感叹:“以我的直觉,我知道这可能行得通,但之前从未尝试过,不免还是有些小紧张。”

Lacombe将他的20'x 24'车库改造成工作室。

为了进行远程记录,每位产品经理都收到了一台笔记本电脑、一台Blue Yeti USB麦克风和一台松下AW-HE68全高清专业PTZ摄像机。AW-HE68通过以太网和PTZ虚拟USB驱动程序进行连接,并且视频使用OBS记录到笔记本电脑中,通过TeamViewer进行远程控制。

团队合作

为了进行通信,共享文件,观看演示、监看远程拍摄制作,松下采用了Microsoft Teams,这是一个通信和协作平台。一夜之间,Teams、Zoom、Ring Central等平台已使人们和企业可以在家中与外界进行相对安全的通信了。

为了查看Lacombe在制作过程中拍摄的内容,Patel使用AV-UHS500切换器输出,从SDI到USB的转换器中创建了四分割。

在专业影像视觉系统高级副总裁约翰·贝斯利(John Baisley)开场白的录制过程中,Patel和Wickizer通过Teams软件,实时监看并提供指导。通过观察绿屏和虚拟设置视图来确认屏幕方向。

在专业影像和视觉系统高级副总裁John Baisley录制开幕词时,团队能够实时查看Baisley的位置并通过Microsoft Teams提供指导。

“我们还可实时判断Laiz的站位与虚拟场景是否穿帮,并及时纠正。” Patel解释:“在远程操作过程中,没有团队协作就不可能成功。”

“远程操作非常酷” Wickizer补充:“我们在波士顿有一个人,Patel和我在新泽西的家中,在西海岸有另一个人。有一次,我女儿来到我们的地下室,问我在做什么。我说‘我们正在进行远程制作’她真的不敢相信。”

Free-D和Unreal Engine虚幻引擎

要将逼真的VR Studio整合到现场制作中,捕获准确的摄像机定位数据至关重要。在预演准备过程中,DisruptAR升级了Free-D驱动程序,该驱动程序顺利地将松下4K专业PTZ摄像机AW-UE155(通过免费固件升级,内置Free-D协议)直接导入Unreal Engine虚幻引擎中,这使它能够输出平摇/俯仰/变焦/光圈信息。通过IP(UDP)直接从摄像机传输到虚拟的实时跟踪系统,而无需其他传感器、编码器。

Lacombe解释说:“Free-D起源于90年代初,是BBC的一种摄像系统的跟踪协议。它定义了六个自由度——平摇、俯仰、滚动、XYZ以及视场、变焦和聚焦。这些值将被发送到虚拟渲染引擎并连接到虚拟摄像机,因此您的背景将以每秒60帧的速度实时响应。”

如Lacombe所讲,从《狮子王》到《曼达洛人》,虚幻引擎已被广泛应用。Lacombe:“这是目前好莱坞普遍采用的底层技术。大部分时间,他们都在使用它作为代理,但目标是‘最终像素'这使得您在屏幕上看到的虚拟场景能够与现场人物实现同步。”

Free-D协议定义了六个自由度——平摇、俯仰、滚动、XYZ以及视场、变焦和聚焦。

“虚幻引擎是一种游戏引擎,已应用于其他市场,包括体系结构,CAD可视化,在这种情况下还包括广播和电影。” Lacombe:“我们正在使用它来达到更高的真实感,从传统的DCC工具(如Maya、3D Studio Max、Blender)中获取资源,并使用NVIDIA显卡以每秒60帧的速度进行处理,从而为观众提供逼真的镜头特效,例如绽放,耀斑和散焦。达到每秒60帧的逼真度和渲染所需的‘功力’实际上是由虚幻引擎担当。”

在车库中创建虚拟世界

Lacombe的工作室在他改建的车库中,面积仅为6乘7.3米,他的工作人员仅需一名助手。至于绿幕,他采用了Pro Cyc 便携式的。受场地所限,女主持人Laiz只有几步的走动空间,所以摄像机也要尽可能小型化,这更是让松下AW-UE155机身灵活、精巧的优势得到了发挥。

即便在车库的狭小空间内,也必须按大型工作室的标准来激发潜能。

为了给Laiz补光,Lacombe使用了两个LED柔光平板灯。他还用一些聚光灯模拟背景氛围中微红色光线。

现场,Lacombe使用了两台UE155摄像机——左右两个机位。

现场,Lacombe使用了两台UE155摄像机。当Laiz转向显示器上的产品经理时,导播会切换到Laiz视线水平的第二台UE155,以模拟产品经理的视角。视线的匹配是个挑战,但Lacombe说,只要明确了主持人的位置,就有诀窍可循。

一键式制作

对于虚拟场景的设计,Lacombe添加了Panasonic徽标。

根据Lacombe的说法,在创建自己的虚拟空间时,由于在线建筑可视化已普及,因此还有更多3D素材可用。您可以转到3D库并查找3D素材或模型,然后根据您的自定义要求进行构建。Lacombe解释:“您选择了营销品牌、颜色、材质。将素材放入其中后,便可用按钮将墙壁拆除,单击或四处移动,实时调整显示器等。在现实世界中,这将花费大量时间和金钱。而在虚拟世界,一旦构建完成,就很容易调整、调用。”

主持人佐伊·莱兹(Zoe Laiz)就新闻和内容创作采访了高级产品经理史蒂夫·库珀曼(Steve Cooperman)。

保持安全距离

凭借数十年的经验与完善,虚拟制作得到了长足发展。尽管现实布景、虚拟布景在本质上是相通的,但最大的区别是每个人都还是生活在现实空间中。一旦取消了居家隔离条例,远程制作是否会成为常态还有待考证。

Lacombe说:“有一个原因,就是有人守着KEY,有人看着剧本,有人盯着摄像机的角度和道具……所有这些“岗位”仍需保留,我们只是在尝试找出远程执行的最佳方法。目前效果令人满意,我们都对该系统各部分的顺畅匹配、高效整合感到惊喜。

热门技术探讨更多>>

同类产品或技术文章列表更多>>