本人是个VR老司机,以前有过不少VR头盔,后来都吃灰了,最近买了个PICO NEO3,很轻便,于是又玩起了VR。
今天来讲讲怎么用PICO NEO3来进行虚拟混合现实的游戏视频录制。
我们需要准备一下这些。
1、VR头盔。
2、摄像头。
3、绿幕或者相应的抠像软件。
4、免费的LIV软件和SteamVR正版游戏。
5、录像系统。
1 VR头盔
其实很多VR头盔都可以进行混合现实的展现,PICO NEO3只是其中之一,不过它轻便,WIFI6的链接速度也有所保障。我自己测试下来,在进行投屏输出的同时还能流畅的进行串流游戏体验。
我用的是串流助手5.10版本,是个非官方的版本,有90HZ刷新率。本周官方应该会放出测试版。记得手柄最好选择标准,这样以后在LIV里面对准更加直观。
2、摄像头
摄像头可以是USB的摄像头,比如罗技C922,也可以用手机加软件代替,我用的就是手机使用无他相机app配合无他伴侣来实现的,其他还有ivcam,DroidCamX等软件可以实现。无他伴侣的好处是可以美颜,对抠绿幕来说效果也会更加好一点。
无他相机的网站是https://www.wuta-cam.com/
Ivcam的是https://www.e2esoft.cn/ivcam/
3、绿幕
其实买一块绿幕不需要多少钱,有条件的可以弄一个,也可以用纸来铺。没有绿幕的,可以用软件来代替。比如罗技以前带的软件ChromaCam就可以实时抠像,不过效果比较差,分辨率和刷新率都很低。
如果是英伟达显卡,Gforce RTX 2060以上可以用NVIDIA Broadcast软件,相机中的背景更换功能来实现。效果还是不错的。它的输出分辨率由输入分辨率决定。4K都不在话下。图中DroidcamX默认分辨率较低。
4、LIV软件的安装和调试。
以前装LIV之前还要安装liv:vivr,现在都整合在一起了。在NEO3串联好的情况下,安装LIV并运行。第一次运行,会提示要安装驱动,记得安装,并且之后需要重启steamVR
重启后,steamvr会出现一个追踪器的图标,有时候还会多个手柄。
进入LIV,选择中文。
虽然选了中文,还是会有很多英文界面。
左边那个是录制,右边直播用的,可以不用管。
进去以后跳过教程。手动调节。先调节相机,类型选择摄像相机,然后设备选择你的摄像头设备,模式里面分辨率一定要选对,不然画面不会出现,很多时候需要点一下才有画面。
接下来是核心部分,就是摄像头和手柄的位置的校正。默认是无,点开后会发现pico neo3的两个手柄。我的经验是就直接选择无(静态),这样是最容易的。
点击开始校准,会提示按下控制器菜单键关闭STEAMVR面板,按下左手菜单键即可。
这时候VR里面的画面应该没有菜单了。另外可以在头盔里校对,也可以从桌面校对,建议从桌面,这样会清晰点。
校对的时候,最好戴着头盔,头盔放在头上面,这样头盔里看到的画面和实际校对的画面比较接近。校对时候我都是用右手柄的,第一步手柄尽量接近摄像头,我是看着手柄圈包围住红十字,按下扳手。
第二步,对准左上方的红十字,按扳手,下方会提示你要离开摄像头一定的距离。
第三步,对准右下方的红十字,按扳手。注意我都是右手柄完成的。
三步完成后,应该能看到手柄,然后可以进行微调。位置比较好理解,上下调节Y,左右调节X,离开远近用Z来调整。视场我是用默认的,这个会影响手柄的大小,旋转我一般不调整,很容易偏离。第一项的延迟,PICO NEO3目前版本我调整到200ms比较合适。这个其实你转动一下手,可以看到动作是否同步的。
全部调整完毕后,可以在细节里面保存参数到文件,以便之后调用。本身LIV也是支持多个配置文件。
接下来进行色度键调节,也就是抠像。一般默认的抠像效果就很好。阈值是抠像颜色的厉害程度,平滑是指边缘锯齿和颜色的处理。
裁剪和翻转这里,很容易理解。可以把摄像头拍到的多余的地方去掉。有时候绿幕覆盖不到的时候,可以用到。
取景器,
如果你调节得当,在头盔画面里你可以看到一个写着LIV的小方盒子,这个就是你摄像头的位置。
如果和现实中完全吻合,是最佳的。
取景器启用后,当你在头盔里望向摄像头的时候,可以在头盔里看到你自己的LIV输出视频。这样不用一直拿下头盔在电脑里看位置调节,很方便。具体我后面有图演示。
输出量是LIV输出的分辨率和帧速率。
一切调整完毕后,可以进捕获菜单,选择好游戏和分辨率,点同步并启动进入游戏。
注意有些游戏需要特别处理,在这个界面注意事项会写上的。
进游戏的黑屏读取过程中最好不要乱动,也不要坐下,不然会有很多身高问题,甚至手柄都可能和你反向。我一般都是面朝摄像头,进游戏后,再用左手调出steam菜单调节视角,这个技巧很有效,很多串流的游戏都有这种情况。调整点击的地方如下图,三秒校正。
之后为了录像方向好看,我一般斜后方对着摄像头,这里前面提到的取景器就很有用,你可以戴着头盔看到你虚拟现实混合的画面,此时转身微调来获得最佳的录像视角。
5、录制系统。
录像就是对电脑屏幕录像,有很多录屏软件可以做到,我用bandicam录全屏,用OBS专门录窗口中的LIV捕获画面或者串流的游戏画面。OBS还能实时进行串流推送,进行B站、虎牙、斗鱼等平台的直播,这个我这里就不详细说了。悲惨的是,我这次虽然全屏录像了,但是关键的虚拟混合现实的画面没有用OBS录下来。
可以看到,我完美的躲开了一发子弹。同时开枪反击。
整个教程我是录像了的,不过怕音频回输,乌龙了一下,全程没有录进我的说话声,等有空配音了上传视频网站,会更加直观一点。