新浪新闻客户端

Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR
2020年06月22日 10:00 新浪网 作者 VR陀螺

  

看日报是个好习惯!

  射击游戏《幽灵巡逻队 VR》登陆Vertigo Arcades线下体验店

  新冠肺炎疫情以及随后的全球封锁严重打击了虚拟现实游戏厅和线下的娱乐场所。《亚利桑那阳光》开发商Vertigo Games开设的线下娱乐体验设施Vertigo Arcades 已经针对目前的市场混乱提供延期付款条款、授权扩展和其他形式的支持以积极响政府安全措施。基于上述调整,Vertigo Arcades 现在推出了由CrazyBunch开发的线下游戏新作《幽灵巡逻队 VR》(Ghost Patrol VR)。

  随着全球各地的虚拟现实游戏厅开始重新开放,Vertigo游戏厅希望通过一款全新的自由漫游、协同定位的多人虚拟现实游戏重新获得新客户和回头客的关注。这款游戏让四名玩家对抗分散在幽灵庄园各处的彩色幽灵军队。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  《幽灵巡逻队 VR》是一款快节奏的合作冒险射击游戏,任务是让1-4名玩家穿越魔法走廊,同时使用他们强大的色相爆破器轰击充满活力的幽灵。为了绕过特定的障碍,玩家需要收集分散在地图各处的神秘球体;它们可以帮助团队重新定位走廊和触发平台的位置。在穿越了几个诡异的场景后,玩家们必须共同努力去打倒并“击溃”巨大的幽灵王。

  Vertigo Arcades客户经理Mario Goncalves在一份官方发布信上表示:“我们已经准备好,通过正确的合作和支持,帮助重振这个充满创造力和创新的行业。”除了合作的元素,玩家也可以为获得高分而竞争。在每个游戏开始之前,每个玩家都被分配一个不同颜色的冲击波枪,通过拍摄相应颜色的鬼魂,他们可以获得额外的分数。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  这款游戏将于6月30日在select arcades上线。游戏时常大约持续20分钟,12岁以上的玩家均可体验。

  日本公司Hashiras宣布推出VR演示工具“ Kinetoscape”

  Hashiras在6月19日发布了VR演示工具“ KINETOSCAPE”。说到Hashiras ,该公司目前不仅专注于基于位置的VR,而且还制作和推广高质量的VR内容。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  (Kinetoscape,由Hashiras发布的新的VR演示工具)

  这次宣布的“ Kinetoscape”是专门针对Oculus Quest的VR演示工具,它利用了Hasirus在商业和教育领域中创建基于位置的娱乐VR内容所积累的专业知识而开发。在实际使用中,同一地点的所有参与者都穿着Oculus Quest来同步VR空间并在共享VR空间中进行各种演示。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  (您可以与每个人一起将其封闭,从而体验出现在VR空间中的汽车3D模型。在演示中,您可以打开汽车门和引擎盖,甚至进入汽车)

  例如,通过使用此工具,您可以在VR空间中拾取实际的3D建模产品,并从各个方向进行查看。确认和幻灯片材料以及无法传达的口头解释等信息可以作为“经验”传达。在共享的VR空间中,您不仅可以体验所谓的“演示文稿”幻灯片素材,还可以体验VR特有的媒体,例如360度视频和双目立体视频播放。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  (也可以切换作为演示舞台的VR空间。在演示体验中,在池袋东出口站前的VR空间中安装的巨大屏幕上进行了演示)

  该产品的开发于今年3月中旬开始,基本部件已于5月初完成。据说是不到两个月的速度发展。但是,由于新的冠状病毒感染的蔓延,对远程办公和远程工作的需求不断增长对这一时期的发展影响并不大。

  之所以选择Oculus Quest硬件,是因为该设备是无电缆的多合一设备,并且具有绘图性能和手动跟踪功能。除了在参与者之间共享VR空间之外,还使用了Oculus Quest最初具有的空间识别功能(监护系统)的方法,以真实空间(例如会议室)为中心。据说可以根据环境进行设置,包括识别位置的机制。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  (所有演示者都在同一个地方,并且他们的站立姿势也保持同步)

  但是,从某种意义上讲,自然会产生一个问题:“如果所有参与者都在场,为什么不戴VR头盔?”

  Hasirus总裁兼首席执行官安藤明弘(Akihiro Ando)说,``正如您所说,如果只能用中等大小的纸质材料,显示器或投影仪来解释内容,我认为传统的演示格式就足够了。''

  “但是,另一方面,Kinetescape的一项功能是,您可以在演示中看到所有人所包围的全尺寸汽车的3D模型,并且可以与客户一起“体验”强大的360度图像。当然,由于参与者实际上在那儿,所以声音自然会来自人的方向。我认为我们可以通过将其呈现在共享的VR空间中来使用它。”

  另外,Kinetscape具有使业务演示更加自觉的机制。

  “用于演示的所有数据都存储在每个Quest主体中。因此,即使网络线被切断,参与者之间的相对位置信息也将被切断,但是演示数据本身您可以继续观看,每个人也可以发送和接收数据,因此您不必停止整个演示文稿。”这也是迄今为止Hashiras的知识得到利用的地方。

  许多人认为VR演示工具和协作工具是“每个人都可以远程参与”。但是,该“ Kinetoscape”可能是“恰到好处”的VR演示工具,可以弥合每个参与者远程参与的VR协作工具与诸如基于位置的VR景点之类的大事之间的差距。另外,易于用作VR呈现工具和易于引入可以降低在商业场景中使用VR的阈值,并且可以在启发和普及VR中起作用。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  (参与者的化身显示在VR空间中。化身尽可能简单,以便更多人可以同时参与。)

  关于这一点,安藤先生说:“由于新型冠状病毒的影响,对远程办公和远程工作的需求正在增加,我也想知道该工具最初是否旨在最大程度地提高远程通信的价值。在进行开发的过程中,我再次意识到位置的价值或现场聚集的价值非常高。

  与基于位置的VR吸引相比,该Kinetscape可以降低运营成本(人数和劳力等),设备成本也很便宜,但可以容纳数十人。我认为我们能够实现符合“更多人可以轻松参与并共享相同体验”设计理念的东西。

  另外,我经常谈论类似于VR的VR的传播,例如,如果公司中的一个人不能使用电子邮件,那么我将永远无法摆脱FAX的文化。VR就是一样,如果公司中的优秀人才能够使用它,我认为它会进一步传播。”他说,不仅是工具本身,而且还有传播VR本身的意图。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  据外媒报道,Facebook收购了瑞典初创公司Mapillary,后者希望通过街道图像数据库与Google以及其他公司合作,以绘制世界。目前收购交易条款尚未透露。

  Mapillary团队和项目将成为Facebook更广泛的开放测绘工作的一部分。Mapillary还表示“对OpenStreetMap的承诺仍然存在”。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  Mapillary联合创始人兼首席执行官Jan Erik写道:“从创建Mapillary的第一天起,我们就致力于建立一个全球性的街道级图像平台,该平台使每个人都能获得制作更好地图所需的图像和数据。我们的平台有成千上万的贡献者,并且每天使用Mapillary数据对地图进行改进,我们现在正在朝着这一旅程迈出下一步。”

  正如Erik所指出的那样,Facebook正在“通过结合机器学习,卫星图像以及与制图社区的合作来构建改善地图的工具和技术。”映射具有社交网络庞然大物的即时用例,例如Facebook Marketplaces及其本地业务产品,而另一个应用程序是增强现实。

  Facebook在今年2月还收购了另一家欧洲初创公司Scape Technologies,该公司成立于2017年,正在开发基于计算机视觉的“视觉定位服务”,使开发人员能够构建所需的定位精度远远超出GPS功能本身的应用程序。该技术最初以增强现实应用为目标,但也有潜力用于为移动性、物流和机器人技术提供动力。更广泛地说,Scape希望使任何配备摄像头的机器都能了解周围环境。

  Mapillary也是最新加入的“开放”项目,现在由Facebook资助。去年12月,Facebook还悄无声息地收购了英国的Atlas ML,后者是机器学习论文和代码的免费开放资源。

  回到Mapillary,这家初创公司渴望强调它将继续成为“图像,地图数据和改善所有地图的全球平台”。“您仍然可以上传图像并使用平台上所有图像的地图数据,” Erik说道。它还在更改许可证以允许商业用途:

  “从历史上看,我们平台上提供的所有图像都是开放的,任何人都可以将其免费用于非商业目的。向前发展,这将是正确的,但从今天开始,它也将免费供商业用户使用。通过继续使上传到Mapillary的所有图像公开并提供给所有人,我们希望启用新的用例,并扩大覆盖范围和使用范围,以使所有人受益。虽然我们以前需要专注于商业化以构建和运行该平台,但加入Facebook会使Mapillary更加接近我们从第一天开始的向任何人提供免费服务的愿景。”

  苹果新专利:通过光瞳扩展功能增大HMD设备视场角

  今天,美国专利商标局发布了苹果公司的一项与未来眼镜或HMD有关的专利申请。更具体地说,该专利涵盖了一种光瞳扩展功能,该功能旨在增加投射到光学镜头上的图像的视场,从而为AR应用提供高质量的图像。

  苹果眼镜系列专利中的第一个专利名为“Pupil Expansion”。它通常涉及光学反射装置,并且更具体地涉及在光学反射装置内扩展光束。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  苹果在其专利申请中指出,一个或多个全息光学元件可用在光学头戴式显示器(HMD)设备的波导中。HMD设备具有反射投影图像的能力,并且可以促进用户体验增强现实的可穿戴设备。

  头戴式显示器通常涉及投射虚拟图像的近眼光学器件。过去,HMD技术的局限性导致了许多经验障碍,包括图像质量下降以及设备重量和尺寸增加。

  过去的技术包括用传统的光学器件来反射、折射或衍射光,但是,这样的设计使设备趋于笨重。另外,常规的镜子和光栅结构具有固有的局限性。例如,常规反射镜可能具有必须与表面法线重合的反射轴,从而使反射镜取向欠佳,或者反射镜处的反射输出受阻。

  苹果的发明总体上涉及一种或多种改进的方法、系统或设备,用于将光束从入射瞳孔扩展到出射瞳孔(即,瞳孔扩展)。该方法、系统或设备可以在光学设备或系统中采用一种或多种瞳孔扩展器或瞳孔扩展技术,以使投影图像的视场(FOV)增大。

  苹果专利图图1是其中可以实现包括本文原理的HMD设备的图示。HMD设备#100可以包括眼镜或头饰,其中近眼显示器(NED)#105可以被粘贴在用户的眼睛前面。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  苹果公司在支持专利中使用了这个特殊的专利数字,我们在四月份就介绍了有关色散补偿结构的技术,该结构可以使用户体验高质量的AR图像。

  苹果专利图图3是结合了二维偏斜镜出射光瞳扩展技术的光学系统的图。光学系统(#300)可用于HMD,增强现实(AR)或虚拟现实(VR)应用中,例如但不限于图1的HMD#100。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  苹果专利图8B示出了支持瞳孔扩展的光学透镜#800-b的示例。

  美国专利局今天发布的这项苹果专利申请20200192101于2019年第四季度提交。苹果专利具有丰富的技术细节,对于那些有兴趣深入研究本发明的人可以点击此链接查看。考虑到这是一项专利申请,目前尚不知道这种产品何时能够上市。

  苹果AR眼镜新专利:通过眼动追踪进行视频及AR内容录制

  今天,美国专利商标局发布了苹果公司的一项专利申请,该专利申请涉及其未来的智能眼镜设备,该设备可以记录包括AR在内的内容,并且具有降低抖动的功能。

  苹果公司指出,头戴式显示器用于为用户提供虚拟现实、增强现实或混合现实体验。设备可以录制来自虚拟现实或混合现实体验的视频,以供播放或分析。注视跟踪传感器可用于提供用户当前正在看的位置的指示。代替智能眼镜框架上的摄像头简单地记录用户面前的东西,还可以通过用户的眼睛或视线移动到的位置来驱动摄像头。

  苹果的发明涵盖了提供凝视驱动的信号处理以促进混合现实或虚拟现实应用程序(例如混合现实记录)的系统和方法。

  在混合现实记录中,可以记录用户看到的部分内容。用户看到的这部分内容(例如,包括通过头戴式显示器显示给用户的视频帧或使用安装在设备上的一个或多个图像传感器捕获的周围环境的视频帧)可以称为录制盒。

  录制盒可以是相对于视频输入的固定区域。本文提出的系统通过跟踪用户的视线并随着用户的视线移动来移动录制盒从而识别关注区域。

  一个这样的例子可以是凝视录制盒的中央,以至于录制盒被包含在原始帧中。录制盒可以是各种各样的形状,包括例如椭圆形,六边形或矩形。

  以凝视中心点移动录制盒会导致视频抖动。因此专利中实现了一种在凝视中心点之上运行平滑或稳定的算法,以避免录制的视频出现抖动并获得更好的录制效果。

  苹果专利图的图4是被配置为启用视线驱动的视频处理系统的示例框图。该系统由一副智能眼镜和用于供电和存储的连接设备组成,例如iPhone,iPad或MacBook。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  苹果专利图1B是用于在具有凝视驱动的感兴趣区域的混合现实或虚拟现实应用中记录视频的过程示例图示;图1C是用于在具有平滑注视驱动的感兴趣区域的混合现实或虚拟现实应用中记录视频的过程示例图示。

  苹果专利图6是用于凝视驱动的视频处理的过程示例流程图。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  苹果指出,智能眼镜将能够与iPhone、iPad、MacBook、台式计算机、智能电视、智能扬声器等配合使用。

  美国专利局今天发布的苹果专利申请20200195940已于2019年第四季度提交。考虑到这是专利申请,目前尚不知道这种产品上市的时间。更多详细信息请查看链接。

  Google Maps正在街景视图中测试AR地标功能

  除了是一种有趣的探索世界的方式之外,街景视图还可以帮助用户在访问新地点之前先掌握正确方向。Google Maps现在正在测试类似AR的地标标记叠加层,这些叠加层使Street View能更好地成为寻路工具。

  如今,用户在使用Google Maps会遇到叠加在街景视图的透视图顶部的显示标记。在下面的第一张图片中,我们看到了几家带有橙色图标的餐厅/咖啡馆,它们代表了吃饭的地方。在马路对面,有一个蓝色的商店标记,而更远的后面是一个通用的位置指示器。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  将鼠标悬停在气泡上会显示一个浮动框,其中提供了名称、说明、评分、评论数和价格指标。同时,点击即可打开左侧的Google Maps侧栏和常规列表。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  这些位置标记叠加层使街景视图变得更加强大和有用,因为用户无需返回完整的地图以获取更多详细信息。用户只需在街景视图中浏览并悬停即可了解更多信息。

  这有点让人想起谷歌在I / O 2018上演示的最初的“实时显示”概念。除了路线和街道,“地图”应用还标记并覆盖了有关有趣地点的其他信息。

  Google Maps中的街景视图地标并未广泛推广。部分用户在美国纽约和波士顿等主要地区的网上发现了它们,但在较小的城市中却没有。在测试中发现Android版的Google Maps中尚未添加此功能。

  谷歌光场系统新研究成果:提供高质量、低体积光场视频,可通过Wi-Fi进行流传输

  通过展示一种实用的光场视频系统,谷歌正在将沉浸式媒体技术推向新的高度。该系统可以录制和播放宽视野的场景,并具有在捕获视频后在视频中四处移动的能力,从而展示新的视角。由谷歌领先的研究科学家和工程师团队开发的新研究表明,该技术具有录制、重建、压缩和提供高质量沉浸式光场视频的功能,这些视频质量轻巧,可以通过常规Wi-Fi进行流传输,这将推动身临其境的增强现实(AR)和虚拟现实(VR)平台领域迅速发展。

  近年来,身临其境的AR / VR领域因其能在模拟环境中为人们带来真实体验而赢得了主流关注。你是否真的想感觉自己正站在风景优美的红杉林中,而不是坐在客厅里?还是看着艺术家像在工作室里一样创作雕塑?身临其境的AR / VR技术可以做到这一点。

  尽管该领域仍处于起步阶段,但谷歌团队已解决了重要挑战,使沉浸式光场视频领域取得了重大进展。由谷歌研究科学家Michael Broxton和谷歌高级工程师Paul Debevec领导的研究小组计划在SIGGRAPH 2020上演示该新系统。

  该研究主导者Broxton说道:“这是我们在光场上工作的最新成果。我们正在使这项技术变得实用,使我们更接近为更多的消费类设备提供真正的沉浸式体验。照片和视频在我们日常使用的移动设备上发挥着巨大作用,我们希望有一天沉浸式光场图像和视频能在未来的AR和VR平台中扮演同样重要的角色。”

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  在SIGGRAPH 2018上,谷歌研究人员展示了在沉浸式VR中引入了逼真的光场静态图像。这个新系统为解决沉浸式媒体的难题增加了另一个关键要素:视频。光场视频为用户提供了一个更加动态的虚拟环境,可以看到超过180度的场景全景。它们使用户可以在虚拟世界中偷看各种角落并享受更大的深度感。而且该系统能够捕获对于早期方法(如反射表面)具有挑战性的内容。这转化为更现实的环境;例如,自然反射在海浪上的阳光或反射在汽车光亮的引擎盖上的光,就像在现实生活中一样,随着用户的注视而自然变化。

  该团队使用低成本的设备录制沉浸式光场视频,该设备由安装在轻型丙烯酸球上的46个运动摄像机组成。他们使用谷歌研究小组去年开发的机器学习算法DeepView,将来自每台摄像机的视频流组合成所记录场景的单个3D表示。他们的论文介绍了一种新的“分层网格”表示形式,该表示形式由一系列具有半透明纹理的同心层组成。从后到前渲染这些图层,使场景生动逼真,栩栩如生。此方法解决了合成摄像机最初未捕获的视点这一非常困难的问题,使用户在探索光场视频内容时可以体验自然的头部运动范围。

  这项工作的另一个突破涉及数据压缩。这个想法不仅是为了开发一种能够重构视频以提供真正身临其境的AR / VR体验的系统,而且是能让消费者通过AR和VR头戴式设备和显示器,甚至在Web浏览器中访问体验。新系统在压缩光场视频的同时仍保持其原始视觉质量,并且使用常规纹理图集和广泛支持的视频编解码器进行压缩。从本质上讲,它们已经成功地从当今的图像和视频压缩技术引导了下一代媒体格式。

  Broxton说:“用户将能够通过典型的快速互联网连接流式传输光场视频内容。克服这个问题将使这项技术向更多的受众开放。”

  Debevec总结了这项工作,并说:“完成这个项目感觉就像我们克服了在制作虚拟体验时让其更逼真、身临其境、可分配且舒适的主要障碍一样。我迫不及待地想要拥有创意的AR和VR社区使用该技术。”

  雷克萨斯为展示2021 IS新车型推出AR应用,用户可在虚拟环境查看新车

  雷克萨斯(Lexus)推出了一款身临其境的增强现实应用程序,用于虚拟展示其新近重新设计的2021 IS款车型。

  这家豪华汽车制造商原计划在6月9日对这款车进行线下发布,但由于持续的疫情大流行和全美自5月25日开始的抗议活动,该车型已推迟至6月15日发布。

  Lexux AR Play是这家豪华汽车制造商首次推出此类AR应用程序。随着全球各地因疫情造成的社交活动疏远,雷克萨斯受到启发并开发了该技术,以展示其豪华运动轿车的最新版本,该轿车于20年前首次亮相。

  Facebook收购瑞典街道地图数据库Mapillary,或将应用于AR

  该应用程序允许用户在虚拟车辆周围走动,以360度近距离观看车辆外部和内部的景观,甚至可以打开和关闭车门和行李箱。应用的音频旁白说明了车辆的设计、性能和安全性。

  用户还可以使用游戏化功能,像遥控车一样在AR中虚拟驾驶IS。他们还可以通过八种自定义颜色个性化定制车辆外观,并获得照片以在社交媒体上分享。

  “此应用是雷克萨斯长期核心价值的现代表达:'genchi genbutsu'或'go and see',这是雷克萨斯工程师采用的一种做法,即通过现场亲身体验来确保对情况的真实理解”,雷克萨斯营销副总裁Lisa Materazzo说道。“现在,我们的客人可以通过新的IS体验以一种以前无法获得的方式亲眼目睹车辆。”

  现在用户可以在App Store和Google Play上为iOS和Android设备下载Lexus AR Play应用。

特别声明:以上文章内容仅代表作者本人观点,不代表新浪网观点或立场。如有关于作品内容、版权或其它问题请于作品发表后的30日内与新浪网联系。
权利保护声明页/Notice to Right Holders

举报邮箱:jubao@vip.sina.com

Copyright © 1996-2024 SINA Corporation

All Rights Reserved 新浪公司 版权所有