360度视频回放系统在体育比赛中的应用

原标题：360度视频回放系统在体育比赛中的应用在AT&T球场园区内，有一大帮人棒球比赛的忠实粉丝聚集在一起，他们一边吃着热狗，一边喝着啤酒，享受着旧金山巨人队的比赛。如果他们仔细观察，就会发现大约有140台松下GH5微单相机被固定在场馆四周，它们是用来做什么用的呢？AT&T球场控制室这些相机组成的阵列能够为比赛提供几乎实时的360度比赛画面回放，4DReplay Sports是提供该技术的公司，其在韩国棒球联盟有多年技术积累，在亚洲体育界也小有名气。4DReplay应用于娱乐场景据青亭网了解，4DReplay Sports是一家总部位于美国，在韩国设立研发中心的公司，其开发了四维视频制作技术“Time Slice”，通过多台相机接口完成任意角度视频播放/回放功能，并已应用于美国和日本的棒球联赛，此外还可应用于演唱会、动作电影、纪录片、展台活动等场景。4DReplay应用于棒球比赛旧金山巨人队是美国MLB国联西区的一支棒球队，其现在主场馆是AR&T公园。而4DReplay的这套技术在去年的一场比赛中试运行时，巨人队就表现出了浓厚的兴趣。因此，今年便邀请4DReplay在其主场设立固定装置，这也是美国第一个采用4DReplay回放技术的体育场。在美国体育竞技市场，360度比赛回放这相机似乎算不上什么新鲜玩意儿，因为你可能听说过另一个巨头Intel也展开了类似的技术：True View（被Intel收购前的公司名为FreeD）。例如，在明尼苏达州的超级碗比赛中，Intel就在体育场馆中放置了38台全景相机用于提供各种慢动作镜头，而这套方案也适用于棒球比赛。巨人队也了解过Ture View技术，不过其最终还是选择了4DReplay的方案。究其原因，还是速度。巨人队CIO Bill Schlough讲到，Intel的方案将图像渲染成360度全景形式图像往往需要几分钟时间，花费的时间太久了。4DReplay在棒球比赛中的回放“一般情况下，球迷们想要观看一个精彩的瞬间往往需要在单次击球结束后就立刻展现出来。”不仅如此，Intel的Ture View方案还需要强大的计算能力，通常需要数百台服务器，同时数据容量也在TB级别，成本较高。4DReplay方案的相机据介绍，4DReplay的系统可以在5-10秒内输出360度回放画面，并且只需要一台Windows 10 PC即可。安装在AT&T公园赛场的系统还需使用1或2台额外PC以及一些后台服务器，用于加快处理速度，不过其对后台硬件要求较Intel Ture View更低，且数据量也相对较小。Intel Ture View方案的相机4DReplay和Intel Ture View方案的不同点在于，前者采用了更多的摄像机，机型为常规的微单，一般数量在40-150台左右，放置在整个场馆的四周，而后者往往一般需要30多台5K特殊的摄像机完成。相比来看，4DReplay的方案整体安装更容易。AT&T公园的项目使用的是松下GH5机型，每台摄像机都可拍摄4K 60fps的画面，并且通过LAN网线连接至PC（AT&T方案）或光纤，同时4DReplay也为松下提供了定制固件，以便于其整套系统的实施。4DReplay后期软件展示而Intel Ture View拥有一项4DReplay没有的特性，那就是慢动作回放。Intel能够顺利完成的优势就是其通过大量的服务器来渲染。而4DReplay则只能通过人工选择一系列帧，通过特殊的软件来合成本垒打的回放集锦，但最多只有5秒。4DReplay公司COO Henry Chon表示，这套方案在同步性方便表现出色，且无需渲染，只是简单的剪辑。实际上，除了专业人士外，这套方案对于大多数人来讲可能分辨不出两者的区别。在实时体育比赛直播中，这种几乎360度全景视频回顾显得非常重要，除了能够在争议球时能够帮助裁判从多个角度查看，并以此作为判罚标准外，还能够给观众带来巨大的视觉享受。Schlough表示：“这有助于提高重放视频的准确性。历史上，有很多争议的比赛都因为视频角度不理想，最终不了了之。但用140台相机拍摄到的画面，几乎可以找到我下个要的任何角度。”目前，AT&T花园主场地中，4DReplay系统的相机主要布局在一垒、二垒和三垒，本垒板和投手丘区域，因为这是球员们主要的活动区域。因此，如果在外场有争议球时，4DReplay目前依然帮不上忙。而Chon则表示：“目前我们正在通过定制相机＋移动轨道的方式来解决这一问题。”其正在和日本一家公司合作一款无反相机，其特点是不包含电池和存储空间，并可安装在远程控制的移动轨道上。另外，由于体育比赛中往往涉及2个球队，因此视频拍摄系统也要考虑到双方球队，必须获得相同的视频角度才算公平，而且还必须允许纽约的远程裁判能够实时看到这些画面。尽管其已经在韩国和日本有商业基础，但在美国市场还需要进一步测试。比赛视频的回放还有其它的用途。例如，用于教学训练，让教练更容易部署战局，让球员更易理解每个动作；对于解说员来说，其可在全景回放视频中实时调整播放角度，选择重点用画笔去做重点圈出来，让直播看上去更具观赏性；观众还可以通过手机或平板电脑等设备直接观看360度全景比赛回放。4DReplay也在进行更多领域的尝试，例如最近与奥运组委会合作，为冬奥会提供相关服务，例如花样滑冰和滑雪；甚至也再尝试将该系统一个用于英国拳击比赛中。在美国还和几场校园NCAA赛事和CBS体育频道合作，据悉还有望与NBA合作。Schlough还讲到：“自从巨人队在AT&T主场安装该系统后，已有10多支队伍在比赛中接触了这套系统，并且对它的兴趣普遍较高。”而Chon则透露出：“美国MLB正在进一步接触我们的系统，尤其是在比赛回放方面。即便MLB还未确认全部采用该系统，但已与其它三支队伍进行洽谈中。”