当我尝试变成 VTuber

发表于 2023-01-07 更新于 2024-04-18

这篇文章记录我在 2023/1/7 从0研究 VTuber 软件的过程。

我使用的设备是 Windows 11 的 PC 和 iPhone Xr，皮套来自于 Yuri幽里_official 的【免费L2D模型】可盐可甜的机能风少女！无料模型大公开~点击领取。

尝试 VTuber Studio

这个是目前我使用体验最好的软件生态，在 PC 和 iOS 上都有 APP 覆盖，你可以直接在 Steam 和 AppStore 上下载到。唯一不足就是它仅提供测试，手机每15分钟自动断线，否则就得交钱。既然要钱，所以没有开源很正常。不过我倒是在 GitHub 找了非常完整的 API，插件，使用方法等文章。

如果你没有金钱上的压力的话感觉还是可以的。

尝试 PrprLive

看到 PrprLive 的原因是搜到了 [IOS面部捕捉]FaceXD与PrprLive的联动使用方法零基础出道VUP 这篇 2020 年的视频。

搭配 FaceXD

可惜的是，等到现在 2023 年，FaceXD 已经改了两次名，而且不再被 PrprLive 支持了。而且 PrprLive 好像跟哔站有了PY交易。

使用上来说 Shiori（FaceXD）的 iOS APP 做的相当粗糙，UI设计缺少考虑，因为不能推流给 PrprLive 也不好说基本功能是否有欠缺。

而且曾经开源的 FaceXD 迭代到 Shiori 之后就不再开源了，我也不知道作者是怎么想的，可能是苹果税太贵了？但是它在 AppStore 也不收费啊。

搭配直播面捕助手

在 Steam 上下载下来的正式版 PrprLive 提供的面捕 App 的 TestFlight 已经被挤爆了，看到 PrprLive 有内测码（iloveprprlive），在预览版里找到了哔哩哔哩的 直播面捕助手，确信了 PrprLive 和哔站有关系了。（PrprLive 的一级域名 https://peacha.net 会被重定向到哔站饭盒也可以侧面印证这个观点。）

用了新的版本之后面捕的问题倒是解决了，但是对于眨眼的捕捉还是不如 VTuber Studio，应该是还要调下参数。

最终结果

串流用的是 OBS，PrprLive 提供了透明背景的虚拟摄像机，所以不需要扣背景，这点挺好，因为我不知道 VTuber Studio 里有没有相同功能。

如果没有的话就给虚拟摄像机加个 色度键 的滤镜，颜色设置成背景的颜色就好了。

最后的最后

以前我刷到过几个开源的项目，但是都不知去向了，我应该收藏了，但是也找不到了。总的来说，这个领域目前我感觉类似 ARKit 和 TrueDepth Camera 的产品几乎没有，所以不得不去搞一台 iPhone 才能玩。（当然，单靠摄像头跑算法也可以，但是有些细节上感觉还是差点意思。）软件方面，渲染软件（VTuber Studio，PrprLive 之类的）和面捕软件（VTuber Studio iOS，Shiori，直播面捕助手等）之间的割裂太大了，几乎没有公共的协议互相兼容，当然这也和这些制作方的闭源有关，我在网上几乎找不到任何这些软件在除了开发插件以外的地方有告诉你应该如何集成的文档。