小扎元宇宙1小时「真人对谈」载入史册 表情模拟2.0 连头发丝都根根分明

起猛了！

就在昨天，美国闻名播客主播Lex Fridman与小扎敞开了1个小时的元国际「面对面」谈天，震动了全国际。

Lex Fridman聊着聊着，直言「我差点忘记，眼前的你不是真人」。

他们戴上Meta的头显，相隔数百公里，却能如此逼真复原Aavtar的面部表情和动作。

而这背后，是19年Meta提出的一个轻松创建虚拟人化身的技能Codec Avatars，只需要一部手机，就能捕捉人类纤细的表情差异。

有网友表明，甭说人家聊的身临其境，就连自己看的太投入，9分钟的时候，恍然间觉得他们便是真人在对话！

甚至让前谷歌科学家David Ha改变了对「元国际」置疑的态度。

大约13个月的时间，小扎关于元国际的「真爱」好像开端要有回报了。

从2021年到现在，Meta元国际实验室投入数百亿美元都赔了本，可是也终让人们看到了「头号玩家」里的国际离咱们更近一步。

接下来，一同看看小扎和Lex虚拟化身对谈的精彩瞬间吧。

访谈实录

一出场，Fridman和小扎的访谈就在元国际中开端了。

尽管一个人在加州，一个人在德州奥斯丁，通过Codec Avatar和3D立体声技能，两个人就像直接面对面坐在一同相同，开端了这场或许会载入史册的会面和谈天。

Fridman调整了一下光源的方位，两个人都明显感到了光线的变化。

而两个人周围的其他的当地，都是漆黑一片。

看着对方清晰的脸和生动的表情，真的觉得这一切就发生在了一个关了灯的房间里。

而Fridman最直观的感受是，这一切实在是太实在了，实在得让人有点接受不了。

在这样的一个环境之下，长达一个小时的访谈开端了。

访谈触及了小扎关于元国际的想象，以及什么是「实在」的评论，而最令咱们重视的，应该还是小扎关于AI和元国际结合前景的看法，以及他对Meta AI未来的计划。

三年全身模仿就来

在小扎看来，未来 AI 技能将会在元国际中扮演十分重要的人物。

未来肯定会有十分强壮的超级人工智能，可是依然会有很多AI东西能让人们十分便利的完结各式各样的任务。

他以Fridman的播客节目举例，播客主播需要尽或许的坚持和自己的社区观众的互动。可是主播不或许 24 小时不歇息地来做这个事。

如果可以在元国际中树立一个AI来协助主播来保持自己粉丝社区的生机，满意粉丝们提出的各种要求，将会让主播能完结曾经或许完全没有办法完结的事情。

而且Meta期望这样的AI不仅仅是出现在元国际中，而是在现在已经有的各种平台上，来帮主播、

网红们保护自己的粉丝、用户社区。

Meta未来会赶快发布这个功用，赋能更多的内容创作者。

进一步地，Meta AI会更多地出现在元国际的各个当地，和用户进行沟通，为用户供给协助。

不同的AI人物在元国际中会以不同的性格展现出来，为用户供给十分丰厚多样的体会。

而现在这些不同人物的AI已经处于终究的准备阶段了。Meta期望能让这些AI愈加可预测，保证安全性。

除了让普通用户在元国际中的体会更好，AI可以在元国际中为企业，或许代表企业向客户供给各式各样严厉专业的服务。

在元国际的游戏中，AI能让NPC表现得愈加吸引人。他们一个正在开发的相似剧本杀的史努比游戏，AI作为游戏的主持人表现十分好，十分搞笑，很有意思。

Llama 3在路上

Fridman继续问了小扎关于Meta AI现在的一些状况，关于Llama 2和未来的Llama 3，小扎也各抒己见，不断爆料。

在上一次和Fridman的播客中，小扎和他评论了关于是否开源Llama 2，小扎很高兴Meta终究这么做了。

在小扎看来，现在开源一个Llama 2这样的基础模型的价值，远远大于风险。

小扎说在开源之前，Meta花了很多时间，进行了十分严厉的评估和红队模仿，终究才开源了它。Llama 2的下载和使用量比小扎预期的还要多。

Llama 3呢，肯定会有的。不过在开源Llama 2后，现在Meta的优先事项是将其集成到各种顾客产品中。

由于Llama 2自身并不是一个顾客产品。它更像是一个基础设施，人们可以用它来构建东西。所以，现在的重点是继续微调，并且，便是让Llama 2及以及各个版本可以服务好顾客产品。

期望有一天数以亿计的人会喜爱使用这些产品。

可是，Meta也在致力于开发未来的基础模型。现在没有太多能泄漏的，不过肯定也会像Llama 2相同，经历严厉的红队测试才会公布。

小扎也期望，当Llama 3成型时，Meta会继续开源。可是，这个事Meta还没有终究确定下来，由于现在离Meta发布下一代基础模型还比较悠远。

不过开源模型可以让人们更好地体会模型能做什么事情，比方小扎自己就很沉迷于和各式各样的AI虚拟人物谈天，十分上头。

人类未来生活

关于未来人类的生活，小扎说，元国际会无处不在！

最简略的比方便是电话，未来人类会像现在打电话相同，体会到自己和虚拟国际的实在互动。

比方两个人可以随时随地体会他们两现在的沟通方法，除了两个没有真的坐在一间屋子里，其他方面这样的沟通会和面对面的沟通没有任何区别。

由于从哲学的视点来看，实在国际的实质便是咱们可以感知到的东西和实际存在的东西的结合。

数字国际如果可以越来越好的复原这个方面，数字国际就能变得越来越丰厚和强壮。

终究，Fridman问小扎，你该不会是坐在沙滩上和我聊的吧。

小扎说，没有，我坐在会议室里。

Fridman说，可惜了，我就坐在沙滩上，而且我裤子都没穿，幸亏你们没看到我实在的样子。

Codec Avatars：一部手机，化身就来

其实，咱们看到博客视频中，如此冷艳的技能，其实Meta早在19年就研发出来了。

它便是——Codec Avatars。

若想在元国际中完成实在的交互，虚拟化身可是打开元国际这道门的任督二脉。

Codec Avatars这一项目旨在完成一个可以捕获和表明用于XR的逼真头像的系统。

开端这个项目是以高质量的头像演示开端，后来逐步完成构建全身的虚拟化身。

在Connect 2021大会上，研讨人员Yaser Sheikh曾展现了该团队最新的作用——全身视频编解码器（Full-body Codec Avatars）。

与此同时，Codec Avatars支撑更复杂的眼部运动、面部表情、手部和身体姿态。

此外，Meta还展现了虚拟化身在对不同的光照条件和环境下完成头发和皮肤的实在烘托。

Meta开端制造Codec Avatars的契机要追溯到9年前。

2014年，卡内基梅隆大学机器人研讨所旗下的一家3D捕捉实验室Panoptic Studio的负责人Yaser Sheikh遇到了Oculus首席科学家Michael Abrash，两人聊得十分投机。

左：Michael Abrash；右：Yaser Sheikh

2015年，Yaser Sheikh加入了Meta，从那以后便一向领导着Codec Avatars研讨团队。

「要想打造一个逼真的化身，基础在于丈量」，Codec Avatars研讨科学家托马斯·西蒙说。

「化身要以假乱真靠的是准确的数据，这需要杰出的丈量。因此，构建实在化身的关键是找到一种方法来丈量人类表情中的物理细节，比方一个人眯起眼睛或皱起鼻子的方法。」

在匹兹堡实验室的Codec Avatars团队，使用了两个首要的模块来丈量人类的表情：编码器和解码器。

而现在，人们只需要一部手机，就能准确捕捉到面部表情的信息。

直接在元国际中复原真身。

网友惊呼：恐惧谷

看过这期博客的网友们，纷纷被视频中的作用冷艳。

英伟达高档科学家Jim Fan表明，

本期 @lexfridman 将作为第一个由虚拟化身的视频会议制造的播客载入史册。

在未来3-5年内，咱们将完全跨过Avatar和模仿的「恐惧谷」。

在我的职业生涯中，我一向在研讨化身智能体。咱们的终极愿景是完成《黑客帝国》中的场景：人类和人工智能的全身实时化身，共享同一个虚拟空间，以逼真的方法与物体互动，接收丰厚的多模态反馈，忘记国际仅仅一个模仿。

尽管化身现在需要用特殊设备进行扫描，但扎克暗示，智能手机自拍视频很快就能完成。

鉴于3D生成模型的最新进展，我以为几个月内就能完成。细粒度手指追寻和全身追寻将是下一个方针。

从3个像素的头像怎么一下就进化到这个了？一定是我起猛了！

去年Meta在广告和市场营销上花了26亿美元，这个播客的作用比这些钱作用好多了，Lex赶快让小扎给你打钱！

尽管眼球追寻还有些小错误，可是表情的精准出现让人忘了这其实仅仅虚拟化身。未来已来！

怪不得马斯克找不到小扎，本来小扎躲到这儿了！

终究，访谈原视频放在这儿了。

参考资料：

https://twitter.com/lexfridman/status/1707453830344868204

https://twitter.com/bilawalsidhu/status/1708152584152768822

https://twitter.com/DrJimFan/status/1707796272453910930

https://twitter.com/packyM/status/1707572280018993252

此时快讯

【Anchorage Digital已与Eaglebrook Advisors合作提升加密SMA接入】金色财经报道，Anchorage Digital已与加密SMA平台Eaglebrook Advisors合作，使财务顾问使用Eaglebrook平台来分配各种加密策略。现在，这种合作关系让这些专业人士可以通过Anchorage（一家由货币监理署（OCC）特许的银行）受监管地接触加密货币。
两家公司周三表示，Anchorage符合美国证券交易委员会对“合格托管人”的定义，该术语是监管机构2月份提出的一项提案中提出的，将“委托此类实体保管客户资产”。此次合作使富兰克林邓普顿、Ark Invest和其他公司能够在Anchorage Digital上推出他们的SMA策略。