美国当地时间 4 月18 日上午 10 点,Facebook 年度开发者盛会 F8 如期举办。
从 AR、VR 到 AI,Facebook 公布了不少消息,也为开发者们演示了一些有趣的功能。那么,在这些领域中 Facebook 最看重的会是什么?这些重磅消息的背后,又隐藏着哪些 Facebook 没有说明的野心?本期硬创公开课,雷锋网(公众号:雷锋网)邀请到峰瑞资本早期项目负责人、技术合伙人覃超,对 F8 主旨演讲进行点评和解读。
以下雷锋网整理了本次公开课演讲实录。
大家好,我们现在开始。Facebook 是 19 号凌晨一点多,总体来看,当时观众反应比较平淡,或者说跟 Google I/O 比起来,跟苹果 WWDC 比起来,其实相对较为平淡。整个一个半小时,介绍了四块到五块内容,我们现在进行一次点评和回顾。大概二十分钟,然后回答相应的问题。
首先,很多人会问一个问题,F8 代表什么意思。大概三年前,我跟大家也有相同的疑问,去问过 Facebook 里面的人,我自己网上查过相应东西。F8 在维基百科的解释是,Facebook 有黑客的文化,所以在当时的话,Facebook 经常会举行 8 小时的黑客马拉松,所以 F8 这个名字的由来,表示的是 Facebook 8 个小时的黑客马拉松。当然,现在 F8 指的是 Facebook 每年一度的开发者大会,和 Google I/O、苹果 WWDC,如果你现在搞计算机互联网的话,这是每年要参加的三个会议。再加上 E3 的话,总共是四个会议。
回顾一下,F8讲过怎样的内容。不知道大家看没看过去年的 F8,首先,先讲一点,虽然是一年一度的大会,但是和 Google I/O、苹果 WWDC 大会比起来,Facebook 的大会时间不确定,有的时候是 7 月份,有时是 8 月份,像今年是 4 月份。它的时间多多少少随机来定的,主要看自己能不能准备的过来。另外,有三年是没有没有 F8 大会的。第一届是在 2007 年,然后有三年空缺,2009年、2012年和2013年。开场是雷打不动扎克伯格上台给大家说 Facebook 这一年的发展情况,给开发者说一下我们推出了怎样的开发者平台,你们可以去熟悉的。
这张照片是来自两年前的 F8,这时你会看到,像 WhatsApp 是 7 亿的用户,Instagram 是 3 亿的用户,Facebook 自己是 14 亿,Messenger 是 6 亿,现在这个数字已经翻番了,Facebook 是 18 亿。第一届现场还是比较小的座椅,到后来位置和参赛的人就越来越多了。苹果 WWDC 的费用在 2000 美金,F8 是 500 多美金,也就是费用上少了不少。
这是去年扎克伯格在 F8 上展示的内容,也是去年发布了著名的 Facebook 十年战略计划。从图上面能看出来,花三年时间把 Facebook 的生态系统打造好,再用五年时间把一系列的应用,主要是 WhatAPP、Instagram 和 Messenger 三者加强。
再用十年的时间,把移动互联网(Connectivity)基础设施做好,比如说发卫星、无人机,或者是二十四小时在天上转的那种飞机,向贫困的国家或是发展中国家贫困地区投射 WiFi 信号。中间部分是人工智能,指的是用人工智能各种手段解决这个问题。今年的大会他也讲了很多关于人工智能的东西。最后的大家熟悉的 VR 和 AR,这两者是两年前国内创业的一大热点,但是要做成其实很难,很多时候要大公司作为支撑。
有媒体在 YouTube 上将一个半个小时的发布会压缩到十分钟,可以非常快地过一遍整个发布会他到底讲了哪些内容。然后我在中间穿插给大家说,他这里讲了什么,开发者如果感兴趣需要准备些什么。好,我们现在开始。
首先,这个东西来自于 VR 设备 Oculus,你戴上眼镜之后,可以和同伴,你的同伴不需要在身边,只要他也有这个眼镜,两个人都戴了之后,可以在网络虚拟空间里,你有你自己的虚拟人物画像,和他进行交互。就比如说,大家可以在网络时间里玩游戏《H1Z1》。戴上 VR 设备后,你们每个人就是里面的一个人,你就会更加真实。例外,这个也是泡妞利器,后面我再跟大家详解。
先整个过一遍。第一个他讲了相机各种牛逼的效果 。
这里他给开发者演示了一个相机开发平台 Camera Platform,这里不只是简单的相机功能,而是将增强现实技术融入到相机的开发包里面,让你可以很容易打开相机后,实现各种各样增强现实的特效。第一种,根据所拍的物体和它相应的位置,你在它旁边增加一些虚拟的物体。这里可能到,在桌上有一些字出现,以及一些动态效果,随着镜头晃动,会自动适应物体应该在什么位置。
这里讲了另外一个作用,可以把 2D 图片处理后直接出现 3D 的效果,同时改变这个图片的光影,或是虚拟事物的叠加,比如说加入各种特效。
这里是说他们向开发者介绍,他们发布的相机 SDK 还可以对相机里面动态的影像进行模式识别,识别出花盆、杯子啊,以及对物体做一些特有的虚拟现实的效果进去。玩塔防游戏,另外实现各种增加现实的特效。
第二位是 CTO Mike Schroepfer,他展示人工智能部门研究的最新成果,比如前三张图是之前人工智能所实现的状况,而现在是最右边那张图,他们不仅识别目标,识别形状,而且能识别它是怎样的东西。同时对于人的话,可以把 3D 骨骼架构显示出来。在运动场景下,就可以研究人的腿和脚、身体的形状到底怎样。
第三位是 Deb Liu,她是一位亚裔,她的父母也是中国人,她现在是整个 Facebook 开发者平台的 VP。刘姐给大家带来照片相关的特效工具。
你会发现对于国内的各种 APP,如美图秀秀啊,这些特效早就已经实现了,在国内和脸、美图相关的东西,其实是走在世界的前列的。这个东西除了中间稍微不太一样,其他都实现了。
第四位是 Rachel,她要展示的是 Social VR 的东西,也就是那个在 Oculus VR 眼镜上实现社交化的 SDK,可以给大家开发社交相关的功能。她演示的是 Spaces 的功能,也就是说大家可以去到虚拟的网络环境里,你可以和朋友、家人,每个人都有一个类似于“阿凡达”(Avatar)的角色,然后和他们环游世界,打球等东西。
其实就类似于玩网游啊,就比如说你玩撸啊撸也好,魔兽世界也好,你控制自己的角色,只不过这里让你的沉浸感更强。因为你戴着虚拟现实眼镜,另外你可以天马行空飞到世界各个角落,你要是买这个眼镜送给女朋友的话,你和女朋友即使分居两地,两个人只要带上眼镜就可以在其中一个地方,比如你在中国,可以飞到南极洲,带她去欣赏风景,这可真是把妹利器啊。
在 Oculus Store 里可以下载,现在版本还是 Beta 版(测试版)。你先选择你的阿凡达头像,你可以看到十年前的 QQ 秀,在虚拟现实平台又被 Facebook 拿回来,回锅重练,练得更加高级一些,你也可以说 QQ 其实已经走在世界的前列。在 VR 里可以接电话, 可以接 Messenger 视频聊天。
第五位是 David Marcus,他是 Messenger 的 VP,他在 Facebook 的地位就类似于张小龙在 QQ 的地位。他之前是海外支付宝 PayPal 的 CEO,现在被挖到 Facebook 掌管整个 Messenger 团队。Messenger 一般来说是公司的重中之重,因为人作为一个社交型动物,和其他人聊天、发消息是一个刚需,而即时聊天工具它的频次很高,粘性很足,所以任何公司基本上假设能做起来的话,会把即时聊天放在产品线上一个重要地位。这就能理解为什么阿里使了吃奶的劲一直想做各种东西,比如说支付宝加了社交功能,后来战略投资钉钉。
Facebook Messenger 最近在做一件事是把聊天机器人加强,同时做类似于微信开放平台的东西,让第三方个人、公司来开发聊天机器人。另外他们刚刚还开发了一个新的功能,你可以把即时聊天消息的附件进行开发,开发成你自己公司所支持的东西。这里用的是 Spotify(全球最大的正版流媒体音乐服务平台)作为例子,你可以通过在 Messenger 上集成 Spotify 的插件,给你朋友发音乐,或者在群聊里面发音乐。这个功能微信三年前尝试过,但后来没做了。就是在聊天工具的附件里面,你可以支持其他公司的 APP,比如说把网易云音乐加进来,你就可以给朋友发歌,或者在这里发外卖。
我们再来说具体的一些内容。Facebook 在 VR 眼镜上发布了一个叫 Spaces 的东西,所做的事情是让所有人有阿凡达这样的形象,然后做各种事情。每个人有阿凡达的形象后,在里面做各种交互,最最厉害的是,你可以切换场景。有一个类似水晶球的东西,用手一拨就可以换场景,切到事先准备好的场景。
同时可以使用即时聊天工具,与别人语音聊天,视频聊天,左边的人在进行视频聊天,还给自己加了各种特效。还可以跟好多人做一些事情,这些都是在虚拟场景中完成的。不仅你自己有大头娃娃的形象,当你和别人交流时,你可以选择用阿凡达的形象,或是自己的真实自拍。
第二个发布的是相机特效功能,现在开放为一个开发工具,你可以下下来之后调用接口,实现在相机上增强现实的效果。这是扎克伯格的举例,在中国的话是青出于蓝而胜于蓝。如果大家用美图秀秀、美颜相机,Faceu,这些估计都是大家玩的很好的东西。
那么 Facebook 这个更强一点的地方是,能识别场景、深度和表面的物体,当你点击屏幕时,你会发现,它会根据相应的场景和物品来加特效,类似于之前很火的游戏 《Pokemon Go》。它可以识别物体,在物体旁边你可以再复制一杯咖啡,同时把咖啡的样子改变。同时,一盆花的话可以加云、下雨,生长的更高、更大,或者是结出漂亮的花,都可以。
还有,可以玩增强现实的游戏,这里举得例子是,你点击屏幕上的被子后,这里变成你的领地,这时可以玩塔防游戏,旁边有兵过来,你要不停守你的塔,放各种炮。在相机里,利用增强现实技术玩塔防游戏。SDK 还可以在相机里增加各种特效,现在很多 APP 里已经有了,这里的意义就在于把特效做成一个开发者工具,你自己准备创业做一个 APP 的时候,或者你的公司也可以拿来用。在这上边很容易将特效加进来。
再来讲第三个,是现在非常火的机器学习,也就是深度学习的很成果,发布 Caffe 2。如果大家对深度学习了解的话,在现在深度学习的网络里面,现成开放的网络里面最有名的是 Google 的 TensorFlow,接下来是 Facebook 的 Caffe 或者是 Torch,以及亚马逊的 MXNet。而 Caffe 和 MXNet 都是华人的作品,是我们同胞的骄傲。Caffe 之前一直是伯克利的开源项目,也被很多人所用,最近 Google TensorFlow 火了之后,用 TensorFlow 的人更多了。那么 Facebook 对 Caffe 进行了大量的改版。
这里左边是贾扬清是 Caffe 的作者,右边也是行业的教授。他和田渊栋(Facebook 人工智能研究院智能围棋项目负责人),加上亚马逊 MXNet 开发者李沐,这三位是华人人工智能的大牛。我听说大概封闭开发了三个月,赶在这次 F8 上发布 Caffe 2。
如果大家感兴趣,直接在网上搜 Caffe 2,有 Github 的项目,里面源代码都开源了,感兴趣的话可以去看源代码。公司的主页也是可以搜索出来的,就叫 Caffe 2.AI,但是不知道是流量太多了,还是什么,我们现在打不开这个页面。在 Github 上是可以下载的,最大的特点是支持在 iOS 和 Android 平台上进行深度学习,也就是说你可以在移动设备上进行深度学习了。
最后是,关于 Facebook Messenger 部分的更新,但是由于国内对 Facebook 和 Messenger 都无法使用,我很快地过一遍。在 Messenger 里更加更多功能,支持更多附件,支持不同内容。但与我们微信相比,他们还是在追赶过程中,其实微信做的更好一些,走在了前面。
国内开发者都熟悉 Facebook 的一个开源前端框架,名字叫 React。React 这次被重写了,名字叫 React Fiber,就是重写之后的 React。如果你对于前端感兴趣的话,可以去搜以下,改进在什么地方,慢慢熟悉起来。
总体来说,要讲的就是这些,从开始 8 分钟的视频总结再到每个要点的总结,我想大家应该对这次 F8 有个了解。
以下为此次雷锋网硬创公开课读者提问。
Q1:除了 VR 社交,其实扎克伯格也展望了一下 AR 社交,一起戴眼镜下虚拟象棋之类的,这块怎么看?
覃超:不是的,如果你仔细看视频,他一开始介绍了戴眼镜做一些东西,通过眼镜来做 AR,但是马上进行了转折说他们几年前是这样想的,但发现用眼镜并不是一个好的事情,所以他们现在重心转为相机,也就是你手机上的那个相机来做增强现实。他没有在里面讲虚拟下象棋,如果是戴 Oculus VR 眼镜虚拟下象棋的话,就是和原来是一样的,戴了很大的眼镜整个是一个虚拟现实,没有和真正的现实交互。
Q2:你怎么看 Camera Effects 在某些功能上与 Snapchat 有类似之处? Facebook 会因为这款应用来压制 Snapchat 的发展吗?
覃超:对的。Facebook 有很多功能都是效仿 Snapchat,他自己也承认借鉴了 Snapchat 很多效果。但是这些并不是 Snapchat 自己所特有的,很多地方的话,美图秀秀以及 Faceu 是走在前面的,在中国的话人们更爱美一点,是比西方人走在前面。所以即使 Snapchat 本身也在向我们学习。另外,因为 Facebook 和 Snapchat 面对面的竞争关系,很多地方功能在效仿 Snapchat,这个就不说了。Messenger、Instagram 上面的 Story 功能都是模仿 Snapchat。
Q3:Facebook的 VR 战略是不是像 Google Glass一样,基本已经失败了?
覃超:不是说失败了,但是有一点是他们现在达到的成绩和一开始对 VR 的预想有一定的距离,这也能够解释为什么他把小米的虎哥挖过去来管 Oculus 团队。不一样的是,Google Glass 整个项目被取消掉了,而 Oculus 还是在做,是一个长期的投入,还要投入三到五年的时间。有一点,在 F8 大会的时候,其实很多人期待会发布新的硬件,也就是新的 VR 硬件,但是没有发布,可能就是因为整个开发进度相对缓慢吧。
Q4:VR 、AR 对 Facebook 的意义有什么不同?未来两者会相通嘛?
覃超:这两者的技术本来就应该是相同的。VR 本质上是戴了一个很大的眼镜,生活在虚拟之中,AR 是可以看到现实的东西,同时模拟一些增强的技术进去,比如大家玩 Pokemon,用摄像头照物体,在物体上有增强的效果。
对于 Facebook 意义就是一片新的战场,这片战场可以让人类实现更多的交互,以及让人类更加紧密联系在一起,所以只要能够让世界更加开放、更加连接的话,就符合 Facebook 长期的愿景,就愿意在上面花时间。
Q5:如何看待 Facebook 从相机方面着手 AR?这是不是也给一些国内厂商指明了发展方向?
覃超:以我自己在 Facebook 工作的经验,可能各位有点神话这个公司。我自己在里面的话,找方向也是不知道往什么方向走的,而且很多时候有点迷茫,再有的话,是项目在最后交付的进度上面,比一开始预期的时间,都会往后推移,不只是在 Facebook,我在 Google 也有这样的体会。几乎百分之百的时候,项目的截止日期都会被拖延,也就是一般这个项目要半年时间做好的话,都会用一年时间,乘以二这样子。
很多时候,他所发布的一些产品只是一种尝试罢了,并不能说相机是一种方向,那我们所有人都来做相机的创业,并不是这样。所以我们还要继续看。Facebook 现在把 AR 项目压在相机,以及手机的相机上面,再看过了半年,他在这方面的动作是什么,以及看用户是不是用的越来越多。
我觉得,在这方面我是相对乐观的,其实每个人都有手机,而且增强现实已经在各种各样的 APP 里面,像快手、Faceu,你发个图片要P,其实都是初级的增强现实,后面像我直播的时候,会加一个头饰,加一个马头,有一个叫 TiKi 的应用在 00 后里面比较火。
这是一个好的方向,但并不意味你就可以做这方面的创业了。
Q6:VR、AR 和 AI,Facebook 会更看重哪一块?
覃超:Facebook 会更注重 AI 这块,VR、AR 主要以探索为主,所以人工智能方面,如果大家技术出身,特别是软件工程师的话,AI 大家都应该去熟悉。这就类似于比如之前的移动互联网技术,以后会成为一个必备的技能。Udacity 上面谷歌的工程师给大家开了一门免费的课,讲深度学习的。
Q7:记得去年 F8 公布了一款 Surround 360 全景相机,而且还有开源,感觉之后也没有特别大的动静?
覃超:360度相机是给专业的工作室,或是专业公司要做 360 度视频的,并不是针对普通大众的。
你要拍 360 度景象,有很多种方法,国内有全景摄像头,你可以拿在手里,或者有根棒子,拿在手里就能拍出全景画面了,但是 Facebook 这个硬件相当复杂,由 17 个摄像头组成,这是 Facebook 一个普通工程师的业余项目,也就是他自己喜欢造这个小玩意,就做了这么一个东西。
因为硬件比较复杂,而且造价很贵,肯定不会被很多人使用,后面它的命运如何还要观察,可能专业团队使用比较多。当时我在 Facebook 还见过实物,这么多摄像头能拍出细腻的画面,对普通消费者来说要求有点高。
Q8:能不能预测下今年国内 VR、AR、AI 发展趋势?
覃超:我一直对 VR、AR 比较保守,一般都是大厂来做,创业的话做内容可以,做平台或硬件都比较难。做内容,你自己开发一款游戏,游戏在 VR、AR 眼镜里面跑的非常好,比如说之前的《神庙逃亡》这个游戏很适合 VR。
其他一些小游戏,或是在中国风靡的游戏,你可以把它做成 VR 游戏,这个方向时靠谱的。但你要是自己做一个硬件,或是做一个平台,基本上是没有可能的,我们投资的角度来看,一两年前,很多团队在做,现在都不了了之了。
AI 的发展趋势,毫无疑问,是以后的方向了,五年、十年以后的方向了。如果你是软件工程师,你就去学习就行了,能在公司里面运用这些东西,至少不怕了。如果你是创业团队想做这方面,AI 最重要的是,不要去做泛的 AI 技术,也不要做泛的 AI 平台,这些都不靠谱,要做就深扎到一个行业去,发现这个行业可以用 AI 来解决问题的。
我举一个例子,医学上,每个医生要看片子,像体检时给你肺部照个片子,看你肺部是否正常,或者是照脖子看颈椎是否正常,所有片子的大小都是一样的,医生每次去看都是重复性的东西,这些东西都可以用人工智能去识别。识别你有没有颈椎病啊,或者看癌症有没有病变,类似这种。
第二就是淘宝客服,智能回复的机器人,以及其他大量重复但是规则并不简单,要有一定的培训才能做成的东西,后面都可以用 AI 来做。
以及还有经典的场景是国外出了一个什么东西,中国的山寨厂经常拿去山寨,这里就会拿鞋的图片分解每个部件,找到哪个部件可以用国内的哪个供应商的部件,把它凑过来。那么因为国内的部件都不一样,有几万个部件,所以照一双鞋的话,经常要一个人或是一个团队花两三天的时候,把各个部件在国内的供应商里找到。其实这个就可以用 AI 的技术,照一张照片,识别出来相应的鞋上的纽扣、饰品,他们的形状、材质,以及匹配,在国内的原材料经销商的每一个部件来进行替代,最后整个模拟出来的鞋是差不多的。
所有类似的东西,我觉得以后都可以用 AI 来解决。你要创业的话,关键是第一懂垂直细分领域的业务,第二想方设法有数据,不管你是医院还是山寨厂的供应商,你有所有的数据,数据更关键。而技术本身,或者怎么训练,或者训练的框架、模型,训练出来的人工智能的大脑,所有这些东西反而是开源的,在 Google、Facebook 网站上,你只要去照着做都可以实现。所以,关键是垂直行业的讯息和数据。
Q9:之前 Facebook 花了那么多钱收购 Oculus,现在感觉产品销量也不是很好,Oculus 会不会拖累 Facebook 的发展?
覃超:以我现在的经验,不能百分之百给出一个准确的答复。我个人觉得,20 亿对 Facebook 不算是大的钱,Facebook 不会有任何财务压力。但是如果从今年开始,往后推三年没有做出大的成绩的话,也就是在 2020 年没有做出大的成绩,可能 Facebook 会把 Oculus 部门砍掉,那个时候我们才能往回看 Oculus 有没有拖了 Facebook 的后腿,以及当时压宝虚拟现实技术是不是一个正确的战略选择。
Q10:Facebook Spaces 是否能真的改变我们现在日常的社交?但是目前来看,VR 硬件还是个门槛,好像离我们普通人还很远.
覃超:我觉得是能够改变的,你觉得 VR 硬件是个门槛是因为你看到的是最贵的那一档。但实际上,你现在在网上可以买到便宜的 VR 眼镜,做类似的事情,比如说三星 Gear VR,配三星的手机,成本总共是几千块。这个是比较亲民的,但问题是,整个三星在国内销量持续下滑,导致 Gear VR 用的也少。如果以后华为出了这种 VR 套件,要是只卖 200 块,就卖成本价,VR 可能一下子就起来。
我自己当时有朋友有 Gear VR,就去试了一下,把手机嵌入 Gear VR,是非常简单的,而且手机平时正常用好了,不会改变你平时的使用习惯,很容易上手。甚至是关于 VR 的 APP, 只要一把手机放入 Gear VR,就显示的是 VR 内容。
当然还有第三个东西,在国内已经用的很多了,是 Cardboard。这个Cardboard 二十几块钱,各位要是想和女朋友在睡觉前用手机、iPad 看的比较累的时候,可以买两个戴着看,两部手机同时开始,这个效果也是不错的。比如说看《人名的名义》。
如果你的视频是支持 VR 设备,那么就会有很好的沉浸感。但是只是普通视频的话,也是可以的,Cardboard 里面有播放器,让你眼前感觉是坐在一个电影院里面,然后眼前有一个比较大的屏幕,这个屏幕当然就是手机屏,稍微有一点曲面的效果。如果把卧室的灯关了的话,不亚于看 IMAX。