尼泊尔发生了本世纪陆地第五次八级大地震,加德满都12座世界遗产建筑被不同程度损毁,尼泊尔专家称能工巧匠需要用大约10年时间才可修复这些古迹。在他们实现这一目标之前,百度拿出了一个快速解决方案:基于照片游技术,号召全球网友上传加德满都相关景点照片,尝试用技术在虚拟世界对被损毁的景点进行360°还原。这听上去是一个巨大的“拼图”工程,好在有一项名为“照片游”的技术,而这项技术未来甚至有望取代街景车,做到真正还原世界每一个时刻的每一个角落。
照片游技术收集和还原真实世界
百度地图还原加德满都的计划,使用被称为照片游的核心技术。这个技术并不难解释清楚:首先,百度收集用户手里海量的关于某个景点不同角度、不同时间、不同特征的风景照片;其次,通过图像技术对海量照片进行筛选和三维建模,把平面还原成空间;再次,通过智能游览路径规划算法,生成一条最佳游览路径模拟真人游览;最后,利用照片渲染技术,对某些缺失的角落进行修补插入虚拟照片。
照片游技术所以来的四项基本技术,每一个都已被应用在成熟应用之中。
百度、Google地图很早就有UGC景点相册功能,用户可选定一个地点上传对应照片,只不过主要目的是分享给其他用户。基于平面图像的3D建模,是街景应用的核心技术,只不过它的照片素材是街景车等专业取景器拍摄而来。
智能路径游览规划算法主要是利用大数据分析和图像识别算法,分析出哪些角度更受用户亲睐,哪些位置的人流最多,进而得出景点最合适的虚拟游览路线,百度地图热力图便是基于人群特征的地图技术。照片渲染技术在《返老还童》《速度与激情7》已在大量电影中被应用,一些照相馆提供的照片修复服务所使用的软件同样应用了这个技术。
基于UGC的照片游技术已经被应用在Google地图和百度地图之中。百度与Google最核心的不同是智能路径规划算法和图片渲染这两部分,百度除了在空间上还原之外,还可以让用户看到不同时间状态下古迹的不同姿态(阴晴、白天傍晚、雨雪等),这主要基于对用户上传照片的光线强度分析。此前百度照片游技术已上线22个景点的街景,笔者体验感觉还不错。
上述所有技术都离不开关键的几个基础技术:大数据、机器视觉和人工智能。用户上传的海量照片与街景车的规范照片比杂乱数倍,需要剔除无用、重复照片,筛选对于还原有效的照片,这需要图像识别和大数据技术;在还原时不可能人工去拼接需要机器自动还原为3D,路径规划和图片渲染则需要基于图像素材情况进行自动的规划,这需要人工智能技术。当然,机器视觉本身是基于大数据和人工智能技术。
照片游技术还有哪些使用场景?
照片游技术还在探索阶段,目前仅仅用于少部分景点的虚拟街景生成。随着图像识别技术、图像渲染技术、三维建模技术和人工智能技术的发展,它将不断成熟,具有巨大的应用潜力,我甚至认为照片游技术可以与街景技术、电子地图技术并列,成为未来的核心地图技术之一,因为它可以低成本、高效率、无死角地帮助人类把物理世界映射到虚拟世界,而这是从地图第一天诞生其人类一直都有的愿望,并且今天愈发强烈。
典型场景1:还原世界的每个时刻
在加德满都被毁之后,基于街景车的专业取景已无可能,只有基于旧照片进行还原,利用互联网的UGC能力可收集到全球海量照片,照片游技术则可以实现还原。尽管在加德满都被损毁之后,其他重要旅游经典应该会有意识加快街景建设。不过别忘了,有目的的街景建设都只能还原某个时刻的街景,比如杭州西湖春夏秋冬各不相同,只有通过照片游才可还原不同时间点的街景。
还有,除了加德满都,世界上还有大量景色已经无法还原,且存在可观数量的照片,比如三峡工程蓄水后被淹没的沿线城市、沿线风景。哪怕是你所生活的城市,几年之后你再回头来看,恐怕都会面目全非,人类建设大跃进正在淹没一代又一代记忆。不过这个星球每时每刻都在被不同的人从不同角度拍摄进去,从室内到室外,海量照片未来都可能成为“照片游”还原的素材。而这些还原后的结果则可以被应用到景区导览、人文社科研究、用户还旧寻幽探古,等等。
典型场景2:更低成本的街景制作
街景技术已经出现近十年了,不过你会发现你所在地区可能并不在街景地图之中,就算在可能已是两年前的数据,店铺、路段什么的可能都已经认不出来了,相对于电子地图而言,街景地图不论是在覆盖范围还是更新频率上,都差距甚大。原因很简单:街景制作成本太高了。最典型的数据收集设备是街景车,此外还有自行车、头戴式、背包式的街景拍摄器。不过它们都需要大量专业人力,并且收集速度是非常慢的。
照片游技术可以部分取代现在的街景制作技术,它成本更低,更重要的是,速度更快,每个具有拍照设备的人都成为街景收集器,只要他们愿意贡献数据——现在是主动上传,未来或许是对海量云端相册照片进行去隐私处理后的利用。总而言之,照片游是更低成本、更高效率的众包街景制作技术。
典型场景3:室内街景从点到面
过去的街景几乎都是室外部分,并不是室内街景没需求,相反室内虚拟游览、室内导航的需求可能更甚,比如商场和博物馆。
室内街景没怎么做,我想主要有两个原因:室内诸多街景采集设备都失效了,街景车跑步起来,头上戴个街景采集器估计会被打。室内更容易触犯用户隐私,室外距离远人群密度低尚出现过Google 街景拍摄到换衣服女人遭起诉事件,室内就更容易出现这样的事件了。尽管Google、百度在过去做过博物馆、艺术馆的内部街景浏览,不过都非常少,并且为此付出了巨大的数据采集成本。
而照片游技术基于用户拍摄的照片,因此并不存在街景车跑不起来的限制。隐私问题在机器视觉技术成熟到一定成熟完全可以对人脸进行自动马赛克处理。而室内定位技术的成熟也给室内街景虚拟路径规划提供了更大的可能,百度已投资芬兰室内导航公司IndoorAtlas,iBeacon等室内定位技术正高速发展。总之,未来我们世界打开手机地图查看商场虚拟导航,并不是吃人说梦——这些导航都是基于用户上传的室内照片生成。未来互联网公司则可基于室内街景开展O2O体验式购物、O2O体验式公民博物馆,虚拟历史教育等等。
照片游技术未来还有哪些发展方向?
照片游技术才刚刚开始,它的未来不只是一个更低成本更高效率的街景工具,与以下技术有着巨大的结合空间:
1、视频技术。图像识别技术只是机器视觉技术的一种,随着人工智能、大数据和 学习技术的发展,随着机器计算能力的爆发式增长,视频识别技术正在日益成熟。百度现任首席科学家、前Google X实验室负责人吴恩达让机器自动从海量YouTuBe视频识别猫就是视频识别的应用。未来照片游可升级为视频游,实际上视频数据量更大,因为它无时不刻、不知疲劳地地记录着世界,而这些记录的“眼睛”遍布在我们的周围且越来越多。
2、云摄像头。百度上马了百度公园,记录几十个景区的实时视频,未来都可以成为街景还原的数据。不只是百度,不少用户已经开始购买云摄像头,以便通过云实时查看某个地方的视频,这些视频被存放在某个云空间,或者被公开分享,未来它们可以成为照片游街景的数据来源。另外一个分支是运动摄像头,GoPro为代表,国内现在抄得很厉害,未来运动摄像头拍摄的海量运动照片和视频,则可以成为运动圣地,比如珠穆拉玛峰的虚拟实景还原的素材,能够登顶珠峰的人太少,不过想要体验登顶感觉的普通人太多了。
3、虚拟现实。VR设备,Oculus是其中最出名的应用,你带上一个眼镜之后就可以进入一个虚拟世界,它可以给你声音、环境诸多维度的感觉,能够感知你的动作、声音、情绪。而这些虚拟现实设备都缺乏应用和内容,未来基于照片游技术可以为它们创造大量的与现实环境紧密结合的内容。记得去美国大峡谷游玩时在峡谷边看了场平面电影,以后再去可能就是直接带着眼镜去体验滑翔、跳伞等探险项目了;去三亚则可以带着眼镜等设备学习潜水、体验深潜……
4、无人机航拍。DJI(大疆)的声名鹊起说明了一个趋势:航拍太火了。过去人们都是站在地上看这个世界,却很少有机会通过“上帝视角”来了解这个世界。有了俯瞰式的航拍影像数据,人们可以真正实现360度建模世界、还原世界——Google Earth的卫星云图实在太模糊了。航拍技术的普及让Google Earth一下进入了史前时代。从覆盖范围来看,无人机航拍更多还是一个补充,不过它更有用。
总结:百度还原加德满都采用照片游技术,只不过呈现了冰山一角的能力,照片游未来还有巨大空间,当然,一切的前提是人工智能、机器视觉和大数据技术要更加成熟。
微博@互联网阿超 微信 罗超(luochaotmt)
- 蜜度索骥:以跨模态检索技术助力“企宣”向上生长
- 消息称塔塔集团将收购和硕印度iPhone代工厂60%股份 并接管日常运营
- 苹果揭秘自研芯片成功之道:领先技术与 整合是关键
- 英伟达新一代Blackwell GPU面临过热挑战,交付延期引发市场关注
- 马斯克能否成为 AI 部部长?硅谷与白宫的联系日益紧密
- 余承东:Mate70将在26号发布,意外泄露引发关注
- 无人机“黑科技”亮相航展:全球首台低空重力测量系统引关注
- 赛力斯发布声明:未与任何伙伴联合开展人形机器人合作
- 赛力斯触及涨停,汽车整车股盘初强势拉升
- 特斯拉首次聘请品牌大使:韩国奥运射击选手金艺智
- 华为研发中心入驻上海青浦致小镇房租大涨,带动周边租房市场热潮
免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。