新浪新闻客户端

「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划
2020年03月20日 11:31 新浪网 作者 造科技

  2016年,联想和谷歌凭借PMD独家3D技术重新定义了移动设备的新类别。2017年,苹果iPhone X的Face ID带火了3D视觉,机器能更准确地识别和认知用户。但由于苹果打造的上游垄断,该技术无法大规模应用,安卓手机的3D视觉解决方案面临着成本过高、产能有限的问题。

  为了打破垄断格局,一家企业“另起炉灶”,结合自主设计研发的微纳光芯片,提出了除苹果以外唯一具有自主知识产权并且可以量产的3D技术光方案,为3D视觉技术应用带来了更多维度、更低成本的可能性。

  本期「追光者-5G引领数字化」栏目,我们邀请到这家专注于AI和软硬件结合的3D视觉公司——光鉴科技创始人&CEO朱力探索3D能否成为5G应用的杀手锏?

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  朱力

  光鉴科技创始人&CEO

  毕业于清华大学和加州大学伯克利分校

  曾任苹果公司深度摄像头设计工程师

  说在前面的话

  摄像技术经过200多年的发展,走过“从黑白到彩色”、“从低分辨率到高分辨率”、“从静态到动态”、“从2D到3D”四次重大变革,如今我们终于可以记录真实的 3D 世界,⽽不是被限制在胶⽚、纸张、屏幕此类二维媒介上。

  5G的到来让人的空间和时间产生巨变,⼈、机器、云端能够⽆限制地互动。所以,我想用“要有光”这个词来形容我们正处的时间点和机遇。在混沌中,要有光,于是便有了光。

  网络上关于5G的科普已是铺天盖地。我作为⼀个在电⼦工程领域浸淫了⼗⼏年的⼯程师,听到毫⽶波、1024 QAM、MIMO、波束成形这些名词,⼼⾥就跟猫⽖⼦挠似的痒痒,这种感觉就跟⼥⽣们看到桌⼦上摆着La Mer,SK-II,⼼⾥喊着我要⽤一样。但这些 5G新技术是不是真的是我们需要的东⻄呢?

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  我们搞技术的,还是得“说⼈话”。普通大众需要的不是新技术,⽽是生活⾥最本质的需求得到满⾜。技术是撬动这些需求的杠杆。

  3D改变了什么?

  180年前,法国⼈达盖尔发明了世界上第⼀台能够洗出照⽚的相机。在这长达两个世纪的时间⾥,大家几乎默认“拍摄”这一操作获得的就是⼀个“画⾯”。汉字对于“画面”的解释很有意思:画在面上。但⾯是二维的,所以我们习惯在纸上或屏幕上获取信息。

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  ⽽现在,事情正在发生本质的变化,很多⼈口袋⾥就有可以拍摄3D照⽚的3D相机,iPhone、华为、三星、Oppo、Vivo 等⼿机都搭载了结构光或者ToF的3D相机。这意味着我们能够以更低成本获取3D图片,不光了解图片的内容、像素、颜色,还能得知超越平面的像素深度等等。与此同时,3D 显示技术也在快速发展。随着AR/VR/MR产品逐渐普及,裸眼3D趋于成熟。如今在⽹上花⼏⼗块钱就能买⼀个 3D 贴膜,通过匹配的APP就可以在普通⼿机上观看3D视频、玩3D游戏。从2D到3D,多的不只是一个维度,更是真实世界的还原。

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  3D感知由来已久,但为什么最近又在业内引起热议?主要是技术的成熟。3D感知主要受益于三种技术,包括激光技术、纳⽶光⼦技术和 AI技术。激光是具有高精度准直的光束,让我们看⻅⽴体的世界。纳⽶光⼦技术能够突破各种经典波动光学的束缚,让我们看清这个世界;⽽AI技术的发展,让服务于人类的各种机器能够看懂这个世界。

  3D+5G能实现哪些原本没有的功能?

  3D技术的突破让人手一台3D相机成为可能,5G的应用能使人和物快速稳定地连接在一起。这两者结合能在哪些方面带来火花呢?我们回归前文,主要从看清看懂这两个角度出发思考。

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  现在3D技术已落地在许多成熟商用场景,包括VR看房,在手机屏幕上轻轻一划就可以还原房子3D全景,但这仅仅是3D技术的离线分享。客观来说,如果3D摄像头想要完美地重现原始图像,仍需要一定的后期处理过程,但由于大多数人的手机终端并没有强大的GPU以支撑3D图像的优化拼接、渲染等等,因此很难实现实时处理。

  而5G的到来将会使3D图像“动起来”。5G网络速度已经非常接近普通手机闪存的存储速度,在5G普及以后,3D图像可以由终端转移至云端处理器上,实现前端采集-后端处理-返回前端的闭环过程,方便我们实时重建3D图像。既然实现了3D图像的创建和重构,那还可以通过彼此的3D图像进行社交互动,这块领域给我们留了很大的想象空间。

  看清是前提,看懂比看清更重要。当我们抓取数据后,需要结合大量的AI算法,让机器人通过3D感知更快速准确地“翻译数据”并作出实时反应。以自动驾驶为例,要让车辆更安全高效的行驶,必须能够实时准确了解前方道路状况,评估各种可能的场景,并采取最佳的应对措施。当5G将汽车和云端连接起来,可以解放终端做更多的事情。不仅可以通过汽车本身的激光雷达定位,还能够通过5G信号进行定位和匹配,从而使车辆实时准确了解前方道路状况,评估各种可能的场景,并采取最佳的应对措施,实现更安全高效的行驶。

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  当3D遇上5G,将会如何改变我们的生活?

  1、碎片时间节省3D与5G的碰撞是视觉技术与通信技术的变化,能够在很多细节处节省时间。

  举个例子,当我从深圳飞到北京见一个人,是因为我希望与对方面对面互动。一个直观的互动能够解决很多我们从文字和语音中无法解决的问题。3D与5G的结合带来了什么?3D技术能够将万事万物真实再现,在5G网络的加持下,我们通过3D全息投影也可以实现面对面般的沟通体验,未来将会有更多时间在线办公,减少花费在路上的开销。

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  2、更好的医疗

  以下展示的两幅图画并不是科幻图,而是一家以色列公司制作的真实图片。这家公司通过3D成像和显示技术,将人体器官完整显示出来,医生可以肉眼看到病人的患病部位从而进行病情诊断。

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  医生诊断病情之后如何参与治疗呢?其实很多微创手术已经通过机械手臂实现了,医生完全可以远程手术操作。但关键点在于,此过程需要一个非常稳定且延时极低的网络,它的延时甚至需要小于或等于人手神经传递到大脑神经的速度,在医生双手感知之前,能够把信息反馈回来。而5G的到来让我们发现,这些技术都“万事俱备”了,远程手术已经成为可能。

  3、更好的教育疫情之下,在线教育迎来了新一轮发展机遇,但现阶段直播课堂的呈现方式是平面的,仍受限在物理空间。尽管老师讲的兴致勃勃,另一头的学生也只能看着屏幕里的画面。如果我们能够通过3D和VR技术,打造立体化的教学场景,让课堂呈现视觉、听觉,甚至触觉方面的一体化。那不仅可以通过实时语音进行互动,动作捕捉设备和体感设备也让我们通过手势和肢体动作进行交流成为可能。

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  除了生活、医疗、教育,3D和5G还会在我们身边的方方面面创造出新惊喜。即使畅想不会一蹴而就,但每个创新者背后的努力,都在为未来的美好积累能量。光鉴科技正在做的,就是通过3D技术实现更好的感知。正如刻在伯克利校门上的拉丁文Fiat Lux,翻译过来是“要有光”。我们希望通过光把世界看清楚,用光去感知和理解世界,让美好的生活多一些光。

  (扫描二维码,观看直播回放)

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  「追光者-5G引领数字化」第四期:5G与3D感知 | 腾讯5G生态计划

  腾讯5G生态计划首期行业应用合作伙伴招募中

  依托腾讯AI Lab、Robotics X、音视频实验室、未来网络实验室、网络平台部、腾讯START云游戏平台的产品、技术和网络能力,联合运营商、终端品牌、设备厂商等合作伙伴的强大资源,背靠腾讯丰富的多媒体内容和应用场景,通过技术能力、用户流量、渠道资源、品牌资本等,携手运营商、5G应用开发者,探索新应用、新内容和新场景,协同腾讯5G城市计划,共创5G新生态。

特别声明:以上文章内容仅代表作者本人观点,不代表新浪网观点或立场。如有关于作品内容、版权或其它问题请于作品发表后的30日内与新浪网联系。
5G3D
权利保护声明页/Notice to Right Holders

举报邮箱:jubao@vip.sina.com

Copyright © 1996-2024 SINA Corporation

All Rights Reserved 新浪公司 版权所有