图片来源@视觉中国
(资料图片)
文｜白鲸出海
有人来，有人走，是世间常态。Itsme 走了，但没完全走；网易来了，但没完全来。
近两年，乘着元宇宙和全真互联网的东风，动态捕捉+音视频社交模式获得了更多开发者的关注，也走入了更多用户的视野。
Yalla Group 旗下元宇宙概念社交平台 Waha、日本虚拟直播应用 Reality，都将动态捕捉+实时音视频社交作为应用的主要模式。
而网易也伴随这股浪潮，逐渐向动捕+社交领域靠近。除了 2022 年 4 月在国际计算机视觉和模式识别会议上，网易互娱推出的视觉动捕工具 iCap，8 月网易又面向泰国用户推出了动态捕捉+vTuber 虚拟派对应用 Fancy。
本来想借着 Fancy 上线的契机，看看我们之前比较早观察到的动态捕捉社交 App Itsme 近两个月的发展情况，可这一查，却发现 Itsme 已经于 2022 年 8 月 10 日关站了...
因而，我们下文将从两个部分分析这两种截然不同的选择。前半部分主要包括 Natural Synthetics Inc关停 Itsme、以及旗下新产品 Codename 拆解、Itsme 模仿者 Orbit 等 3 部分内容；后半部分，包括 Fancy 产品拆解以及虚拟直播的可行性探讨。
动态捕捉+虚拟社交的尽头是 TikTok？
在很长一段时间，Itsme 都是笔者心里 Z 世代社交的“白月光”。几乎虚拟社交文章必提 Itsme，逢人就安利。想要了解 Itsme 的朋友，可以点击阅读以下 3 篇文章查看过往分析：
《网易投资了IMVU，找朋友这件事在海外市场都有哪些变化？》；
《当游戏对社交进行降维打击，巴西成了虚拟社交的试验田》；
《2021年编辑部记录过的有趣App和品牌们，现在怎么样了》；
尽管我们曾在多篇文章中将 Itsme 称之为“有趣的 Z 世代实时社交产品”，但不可否认的是，Itsme 确实从这个世界消失了...
在宣布于 8 月 10 日关停后，曾经每天有将近 100 万分钟视频时长的 Itsme，在 App Store 和 Google Play 已经查无此 App，已经下载的应用已经无法打开、甚至就连 Twitter 账户内容也被全部清空，好像从没来过...
除了在社交媒体上的全力呼喊，甚至有用户尝试发起“请愿书”，要求开发者停止关停 Itsme，不过结果显示只有 14 名用户参与请愿。总之，Itsme 还是难抵消失在历史洪流中的结局。
而通过笔者过往观察以及用户反馈情况来看，“不赚钱，且费钱”应该是关停的主要原因，在笔者与一些虚拟社交开发者的交流过程中发现，做好捕捉与社交的融合，不仅需要先进的技术，也需要大量的资金，甚至月成本可能要以百万为单位...而且，Itsme 可能还是这其中相对头部的存在，因而研发费用可能要更加惊人。
不过好消息，Itsme 的研发团队虽然放弃了 Itsme，但并没有放弃动态捕捉+Avatar+社交。经查阅发现，Natural Synthetics Inc 上线了新的虚拟社交产品 Codename。
不过用户对此并不买账。目前 Codename 在 App Store 仅有 67 条评论，用户评分 2.2 分。从用户评论来看，低分的原因主要集中在 1、Codename 的产品模式在某种程度与 TikTok 有些相似，Itsme 用户无法接受自己正在使用一个仿款；2、Itsme 上的好友关系无法迁移，导致用户与不少好友失联”等两点原因。
但从笔者的体验和观察来看，Codename 在做的事是有趣的。
Avatar 创建
Codename 会要求用户在正式进入之前，先创建一个 Avatar 形象，并且提供了“Avatar 模版创建”和“人脸创建”两种模式。
在模版模式下，用户可以在 Codename 提供的 12 种不同风格的 Avatar 模版中选择自己心仪的形象。在选择完成后，用户可以自由调整 Avatar 的肤色、体型、服装、五官、配饰和背景，这与 Itsme 一脉相承。
而在人脸模式下，Codename 在取得相机权限后，会根据拍摄的用户照片抓取用户面部特点，为用户生成“独一无二”的五官。Codename 认为这种模式可以让 Avatar 与用户更加相似，但通过笔者与同事的实际体验来看，人脸扫描生成的人像与真人的相似度无限趋近于零，非要说哪里像的话，就是完全不像。五官捕捉很垃圾，不过表情捕捉依然很精准，且模式也算得上有趣。
影片创作
为了方便影片创作，Codename 支持用户创建多个 Avatar 形象。而在这之后，用户可以利用自己的 Avatar 形象，创建有趣的虚拟影片。
目前来看，除了基础的动态捕捉，在录制影片过程中，Codename 支持用户调整 Avatar 的角度和动作、运镜方式、切换 Avatar、编辑 Avatar 形象、切换背景、添加 3D 文字、保留原声、添加音乐、依照模板创作内容。我们选取其中有趣的几个功能，进行详细介绍。
动作。Codename 将动作分为休闲、反应、舞蹈、运动和走路等 5 个类别，覆盖多种日常场景。
以运动动作为例，Coedname 提供滑板、仰卧起坐、打篮球、俯卧撑、开合跳、原地纵跳、后空翻、深蹲、高尔夫、跨步跳等 10 个动作，比健身半年的笔者会得还多...在舞蹈、反应和休闲类别下，Avatar 动作则更加丰富。
背景。Codename 将背景分为场景、用户自定义图片和纯色背景等三种类别。在场景选项下，覆盖少女卧室、日常卧室、客厅、迪厅、舞台、影院、篮球场、厕所、教室、更衣室、走廊等 11 种场景。从场景功能来看，Codename 目前用户群体依然是学生和 Z 世代年轻用户。
而从另一个视角来看，Codename 的动作、场景和服装有完整的适配逻辑。在电影院吃爆米花、在篮球场打球、在舞台弹吉他都可以轻松实现。因而 Codename 虽然是一款虚拟社交产品，但场景却来源于生活。
另外，Codename 在运镜方式的处理也非常专业，提供的歌曲配乐选择也十分丰富，感兴趣的朋友可以自行下载体验。
社区互动
在影片创作完成后，系统会将内容自动发布至 Codename 平台，不过如果用户愿意的话，也可以将内容分享至 TikTok、Instagram、Snapchat 等站外社交媒体平台，或者也可以保存视频链接或下载视频。
用户可以在 Codename 主页查看用户创作的 Avatar 影片，而浏览影片的方式为 TikTok 的上下滑动模式。
在内容展现形式和内容互动上与 TikTok 过分相似，也是 Codename 被诟病的主要原因。用户可以在主页查看影片创作者主页、点赞/评论/转发影片内容、查看影片使用的音乐。
从用户浏览视角来看，目前不少创作者发布的内容为技术流内容，卡点换脸、小剧场都是受欢迎的内容；而从互动结果来看，不少视频的点赞量已经超过了 200 次，多数视频的点赞量在 20-150 之间，部分创作者在 Codename 的粉丝数量已经超过了 7000 个；而从创作情况来看，不少创作者主页的影片内容都超过了 10 个。用户似乎有些口嫌体正直的嫌疑。
不过，从笔者的视角来看，Codename 确实还挺有趣的，和我们此前在《终于找到了跑来跑去之外的元宇宙 App，逛街、旅行、选美都是基础操作》一文中分析的 ICON 也有些共通之处。
虽然大家对 Codename 高度借鉴 TikTok 有所不齿，但社恐友好型创作平台+出色的创作工具+高超的动态捕捉，很难让人不心动。笔者和同事开玩笑，以创始人的技术背景，可能做 ToB 工具，“钱景”更好。
另外，一个有趣的现象是，Itsme 下线了，但 Itsme 模式还在。
Orbit：Itsme 不在了，但没完全不在
Orbit 是中国香港 DHN Amor 公司于 2021 年 12 月 30 日推出的 3D Avatar 社交应用，截至目前，已经登上东欧、南美、中东等 12 个国家和地区的 App Store 社交分类下载榜 Top100。
尽管不论是从产品设计、主要功能还是产品画风来看，Orbit 都与此前曾在北美等流行的 Itsme 差别不大，但对于出海开发者而言也算得上一次突破。
不知道 Itsme 的继任者，Orbit 能否打破魔咒。
Orbit 尝试将动态捕捉、Avatar 编辑与实时互动结合在一起。
在正式开始使用之前，用户需要先创建自己的 Avatar 形象。Avatar 形象创建分为摄像头动态捕捉和个性化调整两部分。
首先，当用户开放摄像头权限后，系统将通过主要捕捉用户眼睛、嘴巴和眉毛的形态生成初始 Avatar 形象，整体属于美式写实风，Avatar 表情会随用户表情实时变化。在这之后，用户可以跟自己的需求和偏好选择 Avatar 的肤色、发型、瞳孔颜色、睫毛、耳饰、眼镜以及背景颜色等，从而打造出更具个性化的虚拟形象。
从笔者的个人体验来看，Orbit 在这方面做得并不好。
1、表情捕捉有很大的误差。仅可准确捕捉眉眼动态，嘴巴捕捉有很大的误差，经常会出现下嘴唇完全包裹上嘴唇的情况，舌头和鼻子的动态变化无法被识别。由于可调用的五官相对较少，因而也会限制情绪表达的多样性，发呆、生气、开心等常规表情也不能精准表达。
2、用户无法自定义调整 Avatar 的五官和脸型，这就导致所有用户的 Avatar 形象都大差不差，缺乏多元性。
不过客观来说，对于一家创业公司而言能做到 Orbit 的程度也并不容易，而要想达到拥有核心技术且聘请了皮克斯工作室人才的 Itsme 水平也绝非一蹴而就之事。
目前 Orbit 内设有 Meet、Moments、Create、Friends 以及 Profile 等 5 个 Tab，共提供随机视频匹配、信息流、群聊等 3 个交互场景。
视频匹配
在注册账户时，Orbit 会要求用户填写性别、年龄等信息并选择符合自己的兴趣标签。当用户点击打开“Gravity”按钮时，系统将会根据用户填写内容为其匹配潜在合适用户。匹配成功时用户双方将以Avatar 的形象出现在聊天室，双方可以进行实时语音视频聊天。
为了缓解尴尬，Orbit 还设置了“问答”和“绘画”两种破冰游戏。在选择破冰问答模式时，用户可以就破冰问题互相提问，或者也可以通过左右滑动切换问题，以此来找到彼此感兴趣的话题。从体验来看，破冰问题主要围绕“在交往时最看重对方哪些特质、曾做过最浪漫的事儿、与家庭成员的关系”等亲密关系话题。
而在绘画游戏模式时，用户需要根据系统提示词汇进行绘画，而对方则需要根据绘画内容猜出关键词，从而提升双方默契度。
当用户双方中任意一方在通话结束前表达了对对方的喜欢时，系统都会建立临时会话窗口。在对方同意之前，用户也可以通过绘画窗口向对方发送消息，只不过消息会被折叠至“New Chat Requests”。
而除了随机匹配，用户还可以在 Meet Tab 下向热门推荐用户发送打招呼信息，对方通过后则可进行进一步的交互。
信息流
用户可以用系统编辑器自由调整想要发布内容的背景、配图、字体、文字颜色以及文字排列，并以图片或视频的形式上传到“For You”。Orbit 会按照时间顺序展示用户们发布的内容。
用户可以为自己喜欢的内容点赞或者直接向内容创作者发送消息，而不论哪种方式系统都将为双方创建临时对话窗口，并同样折叠至 New Chat Requests。
从观察来看，平均每小时会有 5 条左右的内容被推荐至主页，多数女性用户的信息流内容为“自拍+打招呼信息”，而男性用户露脸更少、发布内容类别更加复杂，女性用户发布信息流内容的比例要大于男性用户，内容获赞量大多在 5-20 区间，10+ 比较常见。
Groups
目前 Orbit 正在内测群聊功能，目前共有爱情故事、日常激励、宠物、少数群体、动漫爱好者、游戏玩家、搞笑故事、情绪角落、美丽文字等 9 个不同的群组，艺术、K-Pop、Rap、原创视频、Girls Only 等 5 个群组正在筹备中。
目前现有的群组中，群组成员在 57-369 不等，而群组内发布的信息流内容也在 66-398 个不等。用户加入群组并发布至少一条内容后，便可查看群组内容创作者的个人信息并向对方打招呼。在交互模式上与信息流没有明显差异。
整体来看，Orbit 在交互模式上没有太多创新，不过却也为陌生用户间的交互打开了一条更加便捷的通道，无需对方同意即可向对方发送消息，而为了保护用户体验，这部分来自陌生用户的打招呼信息将会被折叠。通过好友申请后，才会出现在好友消息页。但 Orbit 似乎还欠缺更近一步的交互模式，成为好友后除了视频互动和图文消息并无其他交互场景。在 3 天的测试期间，加了超过 20 位好友，但超过 3 轮以上对话的好友不超过 3 个。如何让用户更加珍惜和在意自己的好友，可能也是 Orbit 下个阶段需要解决的问题。
以上来看，Orbit 目前仍在寻着 Itsme 的老路向前，不知道每月 3 更的频率能不能帮助 Orbit 成长得更好。
Fancy：动态捕捉+语音房+Avatar，二次元 VTuber 进入增长期
Fancy 是网易 2022 年 8 月 2 日推出的 Avatar 虚拟派对应用，主要提供中文、英文和泰文三种语言服务，从测试结果来看产品稳定性还不太强，偶尔会出现报错和闪退的情况。
Fancy 选择泰国市场作为出海首站也是个有趣现象。
在此之前，网易云已经先后面向东南亚市场推出 Heat Up 和 Kaya Live 两款社交产品，旗下互动小说应用 Dokific 也有在东南亚市场发力。
在过去，网易更倾向于在日本测试新产品，而近几次动作能隐隐感觉到网易有一些提升东南亚市场重要等级的意味。另外，网易近两年频繁推出社交+虚拟应用/游戏，似乎也在表达自己探索元宇宙的野心。
从功能来看，Fancy 作为一款虚拟直播互动应用，与日本 Vtuber 直播平台 Reality 高度相似，都是以 Avatar、语音互动和动态捕捉为基础提供实时互动的可能性。
而 Reality 正是日本社交网络巨头 GREE 的元宇宙重点部署之一。在 GREE 的构思中，REALITY 将成为一个高自由度的元宇宙。用户可以制作自己的虚拟空间和虚拟物品，还可以通过参与元宇宙中的游戏和出售原创虚拟商品获得经济收入。
GREE 相关负责人认为，Vtuber 的流行，意味着未来全人类都会拥有自己的虚拟形象，但这还不够。好的元宇宙应该向用户提供有助于构建人际关系、长时间停留在虚拟世界的机制。并不是只有 3D 画面才能叫虚拟世界，让用户感受到社会性更为重要。
目前 Fancy 有“chat、party 和 me”三个 Tab。
在正式开始使用之前，用户需要先根据性别选择自己的 Avatar 形象，
Fancy 虚拟形象整体定位为二次元风格，用户可以从 Fancy 提供的素材库中选择素材对 Avatar 的五官、头发、服饰、鞋履装饰进行调整。
从素材供给来看，Fancy 提供的选项相对丰富，多数为免费使用但也有部分需要通过爱心购买，标价30-300 爱心不等，而爱心需要完成系统任务获得。
在设定完成后，用户可以选择自己感兴趣的动作以及喜欢的 Avatar 背景墙进行“合影留念”，照片可以分享至平台好友、用作头像或者保存到手机。
Fancy 也保留了传统社交的“标签”功能，用户可自由选择符合自身特点的标签，丰富的标签让用户在 Fancy 上的身份更加立体和饱满。另外，用户也可以邀请好友评价对自己的印象，有点像同学录。
目前，Fancy 主要提供提供扩列、群聊和语音派对等 3 个社交场景。
（1）扩列。用户可通过扩列功能，关注陌生用户并与其进行图文聊天。无需双方同意即可开始对话，确实降低了用户社交的门槛，但也有面临骚扰的可能性。
（2）群聊。当双方互相关注后，即可成为好友。用户可以邀请好友组建群聊，既可以在群聊中社交，也可以加入彼此的派对房间。
（3）派对。用户可自由加入或创建语音派对房，和大家一起实时 Party。房间主人可以自由更改房间的名称、主题、公开范围以及房间背景和地板图案，Fancy 在尝试对现实派对环节进行轻度还原。
用户以 2D Avatar 的形象出现在派对，在派对房内用户除了可以进行文字、语音聊天，还可以通过更换不同的动作，或使用庆祝、害羞等互动道具来进行更深度的交互。
如用户愿意，也可以在房间内开启 AI 人脸识别功能，AI 会自动识别头部动作、眨眼、说话等状态，Avatar 表情也会随之实时同步。用户也可以直接将派对房推流到 YouTube 平台，进行派对直播。
2021 年以来，除了海外产品 Reality，实际上 Bigo Live、Uplive、Yumy 等中国出海产品也一直积极布局于此。对于用户而言，虚拟实时动态捕捉已经不是一件新鲜事儿，而面捕的表情灵活度、延时 Avatar 的可编辑度、适用 vTuber 的虚拟场景正成为角力重点。
尽管 Fancy 仍处于十分早期的阶段，但 Fancy 的上线时间、尝试方向似乎又有些耐人寻味，至于发展成果，我们也将持续追踪。
