动态捕捉+虚拟社交的尽头是 TikTok？

动态捕捉+虚拟社交的尽头是 TikTok？

图片来源@视觉中国

文｜白鲸出海

有人来手机社交媒体营销分析，有人走，这是世界的常态。 它消失了，但没有完全消失； 网易来了，但还没有完全消失。

近两年，乘着元界、全真网的风口，动态抓拍+音视频社交模式得到了更多开发者的关注，也进入了更多用户的视野。

Yalla Group旗下的元界概念社交平台Waha和日本虚拟直播应用均以动作捕捉+实时音视频社交为主要应用模式。

而网易也在跟随这股浪潮，逐渐向动作捕捉+社交领域靠拢。 除了网易互娱在2022年4月计算机视觉与模式识别国际会议上推出的视觉动作捕捉工具iCap，网易还在8月推出了面向泰国用户的动作捕捉+虚拟派对应用Fancy。

本来想趁着Fancy的上线，看看我们前两个月观察到的动态捕捉社交app Itsme的发展情况，但是查了一下发现Itsme已经在2022年8月10日关闭了。。 .

因此，我们将在下面的两个部分中分析这两个不同的选项。 上半年主要包括公司关停爱思美、爱思美新品拆解、爱思美模仿者Orbit等3个部分； 下半部分包括花式拆解和虚拟直播的可行性探讨。

动作捕捉+虚拟社交的结局是什么？

一直以来，Itsme都是笔者心目中Z世代的社交“白月光”。 几乎所有的虚拟社交文章都必须提到itsme，安利给大家。 想了解Itsme的朋友可以点击阅读以下3篇文章查看往期分析：

“网易入股IMVU，海外市场找朋友有什么变化？”；

“当游戏降低社交维度，巴西成为虚拟社交的试验场”；

《2021年编辑部记录的有趣的APP和品牌现在怎么样了？》；

虽然我们在很多文章中都称 Itsme 为“一款有趣的 Z 世代实时社交产品”，但不可否认的是，Itsme 确实已经从这个世界上消失了……

在8月10日宣布关停后，曾经每天有近100万分钟视频的Itsme在App Store和Play中已经找不到，下载的应用也无法再打开，甚至连账号全部删除。 空荡荡的，仿佛从来没有来过……

除了社交媒体上的各种呐喊，一些用户甚至试图发起“请愿”，要求开发者停止关闭 Itsme，但结果显示只有 14 名用户参与了请愿。 总之，Itsme还是难以抗拒消失在历史洪流中的结局。

根据笔者以往的观察和用户反馈，“不赚钱，还花钱”应该是关停的主要原因。 笔者在与一些虚拟社交开发者交流的过程中发现，将抓拍与社交融合在一起，不仅需要先进的技术，还需要大量资金，甚至每月的成本可能上百万。 .. 而且，ITSME可能还是其中比较领先的存在，所以研发成本可能更加惊人。

不过好消息是，虽然爱思美的研发团队放弃了爱思美，但并没有放弃动作捕捉+社交。 经查，发现Inc推出了一款新的虚拟社交产品。

但用户并不买账。 App Store 目前只有 67 条评论，用户评分为 2.2。 从用户评价来看，评分低的原因主要集中在1、爱思美的产品型号与爱思美有些相似，爱思美用户不能接受自己使用的是假冒机型； 2. itsme上的好友关系无法迁移，导致用户与“多位好友失联”等两种原因。

但是从笔者的经验和观察来看，我所做的事情是很有趣的。

创造

它将要求用户在正式进入前创建一个图像，并提供“模板创建”和“人脸创建”两种模式。

在模板模式下，用户可以在提供的12个不​​同风格的模板中选择自己喜欢的图片。 选择完成后，用户可以自由调整肤色、体型、服饰、五官、配饰和背景，符合Itsme。

在人脸模式下，在获得相机权限后，会根据用户拍摄的照片捕捉用户的五官，为用户生成一个“独一无二”的五官。 我认为这种模式可以让你更像用户，但根据笔者和同事的实际体验，人脸扫描生成的人像与真人的相似度无限接近于零。 . 五官捕捉很垃圾，但是表情捕捉还是很准确的，模式也算得上有意思。

视频创作

为了方便视频创作，支持用户创建多张图片。 之后，用户可以用自己的形象制作有趣的虚拟电影。

目前，除了基本的动作捕捉，用户在录制视频的过程中，还可以调整角度和动作、摄像机移动方式、切换、编辑图片、切换背景、添加3D文字、保留原声、添加音乐、创作根据模板的内容。 . 我们选择了几个有趣的功能并进行了详细介绍。

行动。 动作分为休闲、反应、舞蹈、运动、行走5大类，涵盖多种日常场景。

以运动动作为例，它提供了滑板、仰卧起坐、打篮球、俯卧撑、顶起跳、垂直跳、后空翻、深蹲、高尔夫、跨步跳等10个动作，还有更多……舞蹈、反应和休闲类别中的更多动作。

背景。 背景分为场景、自定义图片和纯色背景三类。 场景选项下，涵盖女生卧室、日常卧室、客厅、迪厅、舞台、剧场、篮球场、卫生间、教室、更衣室、走廊等11个场景。 从场景功能来看，目前的用户群体还是Z世代的学生和年轻用户。

从另一个角度来看，动作、场景、服装都有完整的适配逻辑。 在电影院吃爆米花，在球场上打篮球，在舞台上弹吉他，都可以轻松实现。 因此，虽然是虚拟社交产品，但场景来源于生活。

此外，镜面机芯的处理也很专业，歌曲和配乐的选择也很丰富。 感兴趣的朋友可以自行下载体验。

社区互动

视频制作完成后，系统会自动将内容发布到平台，但如果用户愿意，也可以将内容分享到站外社交媒体平台，如，，，，，或保存视频链接或下载视频。

用户可以在首页查看用户创建的视频，浏览视频的方式为上下滑动方式。

内容展示形式和内容交互的过度雷同也是被诟病的主要原因。 用户可以在首页查看视频创作者的主页，点赞/评论/转发视频内容手机社交媒体营销分析，查看视频中使用的音乐。

从用户浏览来看，目前很多创作者发布的内容都是技术流内容，刷卡换脸、小剧场都是热门内容； 而从互动结果来看，很多视频的点赞数都超过了200个，部分创作者的粉丝数超过了7000。 从创作的角度来看，很多创作者的首页视频都在10个以上。 . 用户似乎对完整性有些怀疑。

不过，从作者的角度来看，确实挺有意思的。 也和我们在《终于找到一个除了跑来跑去的元宇宙APP，购物、旅游、选美都是基本操作》一文分析的ICON一样。 有一些共性。

虽然大家都鄙视高参考，但社交恐惧友好的创作平台+优秀的创作工具+精湛的动作捕捉，很难不被诱惑。 笔者和同事开玩笑说，以创始人的技术背景，做一个ToB工具是可以的，“千景”更好。

另外一个有趣的现象是，itsme下线了，但是itsme模式还在。

Orbit：Itsme 消失了，但并非完全消失

Orbit是DHN Amor于2021年12月30日在中国香港推出的一款3D社交应用，截至目前，已登上东欧、南美、东南亚等12个国家和地区的App Store社交类下载榜单。中东。

Orbit虽然与之前风靡北美的Itsme相差无几，但无论是在产品设计、主要功能还是产品风格上，都算得上是对海外开发者的一次突破。

目前尚不清楚 Itsme 的继任者 Orbit 能否打破这个咒语。

Orbit 是一种结合动作捕捉、编辑和实时交互的尝试。

在正式开始使用之前，用户需要创建自己的头像。 图像创作分为相机动态捕捉和个性化调整两部分。

首先，当用户打开相机权限后，系统会生成一张初始图像，主要是捕捉用户的眼睛、嘴巴和眉毛的形状。 整体形象美式写实，表情会随着使用者的表情实时变化。 之后，用户可以根据自己的需要和喜好选择肤色、发型、瞳孔颜色、睫毛、耳环、眼镜和背景颜色，从而打造更加个性化的虚拟形象。

从笔者的个人体验来看，Orbit在这方面做得并不好。

1.面部表情捕捉存在较大误差。 只能准确捕捉到眉毛和眼睛的动态，嘴巴捕捉误差较大。 常发生下唇完全包住上唇，不能辨认舌、鼻的动态变化。 由于可以使用的面部特征相对较少，情绪表达的多样性也会受到限制，无法准确表达茫然、愤怒、高兴等常规表情。

2、用户无法自定义调整五官和脸型，导致所有用户的形象缺乏多样性。

但客观来说，一家初创公司要做到Orbit的水平并不容易，拥有核心技术、聘请皮克斯工作室人才做到Itsme的水平也不容易。

目前Orbit有Meet、 、 、 5个Tab，共提供随机视频匹配、信息流、群聊3种交互场景。

视频匹配

在注册账号时，Orbit 会要求用户填写性别、年龄等信息，并选择符合自己兴趣的标签。 当用户点击“打开”按钮时，系统会根据用户填写的内容匹配潜在的合适用户。 匹配成功后，双方用户将以 的形象出现在聊天室中，双方可以进行实时语音和视频聊天。

为了缓解尴尬，Orbit还设置了“问答”和“画画”两款破冰游戏。 在选择破冰问答模式时，用户可以互相提问破冰问题，也可以通过左右滑动切换问题，寻找彼此感兴趣的话题。 从经验来看，破冰题主要围绕“约会时最看重对方的哪些品质、做过最浪漫的事情、与家人的关系”等亲密关系话题。

在绘画游戏模式下，用户需要根据系统提示的词汇进行绘画，而对方则需要根据绘画的内容来猜测关键词，从而提高双方的默契度。

当两个用户中的任何一个在通话结束前表达了对对方的喜欢，系统将建立一个临时的会话窗口。 在对方同意之前，用户也可以通过绘图窗口给对方发送消息，但消息会被折叠到“新聊天”。

除了随机匹配，用户还可以在Meet Tab下向热门推荐用户发送问候信息，待对方通过后，再进行进一步的互动。

信息流

用户可以使用系统编辑器，自由调整想要发布的内容的背景、图片、字体、文字颜色、文字排布，并以图片或视频的形式上传至“为你”。 Orbit 按时间顺序显示用户发布的内容。

用户可以为自己喜欢的内容点赞，也可以直接给内容创作者发送消息，无论哪种方式，系统都会为双方创建一个临时对话窗口，并折叠为New Chat。

据观察，平均每小时约有5条内容被推荐到首页。 女性用户的信息流内容多为“自拍+问候信息”，而男性用户露脸较少，发布的内容类别较为复杂。 女性用户发布动态消息内容的比例高于男性用户，内容点赞数多在5-20之间，10+更为常见。

Orbit 目前正在测试群聊功能。 目前有爱情故事、日常励志、宠物、小众、动漫爱好者、游戏玩家、搞笑故事、情感角落、美言、艺术、K-Pop 5个组别，Rap、原创视频、Girls Only正在筹备中.

目前已有的群中，群成员数量从57-369个不等，群内发布的信息流内容也从66-398个不等。 用户加入群组并发布至少一条内容后，可以查看群组内容创建者的个人信息，并互相问候。 在交互方式上与信息流没有明显区别。

整体来看，Orbit在交互方式上并没有太大的创新，但也为陌生用户之间的交互打开了一个更便捷的通道，可以在不征得对方同意的情况下向对方发送消息。 为了保障用户体验，这部分来自陌生用户的问候信息会被折叠。 好友申请通过后，会出现在好友消息页面。 但 Orbit 似乎缺少进一步的交互模式。 成为好友后，除了视频交互和短信，没有其他交互场景。 3天的测试期间，加了20多个好友，但对话超过3轮的好友不超过3个。 如何让用户更加珍惜和关心自己的朋友，或许也是Orbit下一阶段需要解决的问题。

综上所述，Orbit 依然走的是 Itsme 的老路。 不知道每月3次更新的频率能不能帮助Orbit更好的成长。

花式：动态抓拍+语音室+，二次元进入成长期

Fancy是网易于2022年8月2日推出的一款虚拟派对应用，主要提供中文、英文和泰文服务。 根据测试结果，产品稳定性不是很强，偶尔会出现错误和死机的情况。

Fancy选择泰国市场作为出海的第一站也是一个有趣的现象。

此前，网易云先后针对东南亚市场推出了热度和卡娅直播两款社交产品，其互动小说类应用也在东南亚市场发力。

过去，网易更倾向于在日本试水新品，但在近期的动作中，却隐约能感觉到网易有一些提升东南亚市场重视程度的意思。 此外，网易近两年频频推出社交+虚拟应用/游戏，似乎在表达其探索元宇宙的野心。

从功能上看，Fancy作为一款虚拟直播互动应用，与日本直播平台高度相似，提供了基于语音交互和动态捕捉的实时交互的可能。

并且是日本社交网络巨头GREE的的重点部署之一。 在格力的构想中，它将成为一个具有高度自由度的元宇宙。 用户可以创建自己的虚拟空间和虚拟物品，也可以通过参与元界游戏和出售原创虚拟物品获得经济收入。

格力电器相关负责人认为，虚拟化的普及意味着未来全人类都将拥有自己的虚拟形象，但这还不够。 一个好的虚拟世界应该为用户提供有助于建立关系并长期留在虚拟世界中的机制。 能够称为虚拟世界的不仅仅是3D影像，更重要的是让用户感受到社交。

目前Fancy拥有“聊天、聚会、我”三个标签。

在正式开始使用之前，用户需要根据性别选择自己的形象，

Fancy头像的整体定位是二次元风格。 用户可以从Fancy提供的素材库中选择素材，对五官、发型、服装、鞋饰等进行调整。

从物质供给的角度来看，Fancy提供了比较丰富的选择，大部分可以免费使用，但也有一部分需要通过恋爱购买。 价格在30-300颗心之间，心需要通过完成系统任务获得。

设置完成后，用户可以选择自己感兴趣的动作和喜欢的背景墙进行“合影”。 照片可以在平台上分享给朋友，用作头像或保存到手机。

Fancy还保留了传统社交网络的“标签”功能。 用户可以自由选择适合自己特点的标签。 丰富的标签让用户在Fancy上的身份更加立体和丰满。 此外，用户还可以邀请好友评论自己的印象，有点像同学录。

目前Fancy主要提供分机、群聊、语音派对三种社交场景。

(1)扩张。 用户可以关注陌生用户，通过扩展功能与其聊天。 无需双方同意即可开始对话，确实降低了用户社交的门槛，但也存在面临骚扰的可能。

(2) 群聊。 当双方互相关注时，他们就可以成为朋友。 用户可以邀请朋友组成群聊，在群聊中进行社交，或者加入彼此的聚会室。

(3) 派对。 用户可以自由加入或创建语音派对房间，与大家实时派对。 房主可以随意更改房间的名称、主题、公共范围，以及房间背景和地板格局，而Fancy则力求稍微还原派对的真实。

用户以二维图像出现在聚会上。 在宴会厅中，除了文字和语音聊天，用户还可以通过变换不同的动作，或者使用庆典、害羞等互动道具进行更深入的互动。

如果用户愿意，房间内还可以开启AI人脸识别功能，AI会自动识别头部运动、眨眼、说话等状态，表情实时同步时间。 用户也可以直接将派对房推送到平台进行派对直播。

2021年以来，除了海外产品，实际上Bigo Live、Yumy等中国海外产品也在这里积极布局。 对于用户来说，虚拟实时动态捕捉并不是什么新鲜事物，但面部表情的灵活性、延时可编辑性、适用的虚拟场景正在成为角力的焦点。

虽然 Fancy 还处于非常早期的阶段，但 Fancy 的推出时间和方向似乎有些耐人寻味。 至于开发成果，我们会继续跟踪。