系统工具
Google Play Services for AR是谷歌推出的AR平台,其全称即为Google Play Services for AR。该平台可与苹果的ARKit相媲美,主要目的是助力开发者打造AR应用。它利用智能摄像头把虚拟内容和真实世界融合起来,能够实现对虚拟内容在现实世界中位置的感知与跟踪。依托ARCore以及兼容的移动设备,开发者能让用户通过智能设备体验三维动画。需要说明的是,ARCore是用于开发增强现实应用的Android SDK,作为系统组件,开发人员在桌面端无法直接看到它。
在深入学习 ARCore 之前,先掌握一些基础概念会很有帮助。这些概念共同解释了 ARCore 是如何让虚拟内容看起来仿佛真实地呈现在现实表面上,或是附着在现实世界的某个位置的。
1、运动追踪
当您在现实世界中移动时,ARCore 借助“同时定位与映射(SLAM)”技术来感知自身相对于周围环境的位置。它会识别摄像头捕捉图像里那些视觉特征明显的点(即特征点),并利用这些点来计算位置的变动情况。同时,这些视觉信息会和设备惯性测量单元(IMU)的惯性数据相融合,共同用于估算摄像头在不同时间点相对于现实世界的姿态(包括位置和方向)。
开发者通过把渲染3D内容的虚拟摄像头的姿态,与ARCore所提供的设备摄像头姿态进行对齐,就能从准确的角度来渲染虚拟内容。而渲染出的虚拟图像,又可以叠加到从设备相机获取的图像之上,这样虚拟内容看起来就如同现实世界的一部分了。
2、环境理解
ARCore能够检测特征点与平面,以此持续增进对现实世界环境的认知。
ARCore能够识别出常见水平或垂直表面(像桌子、墙面这类)上聚集的特征点,并把这些表面以几何平面的形式提供给应用程序。同时,ARCore还能确定每个几何平面的边界,将相关信息也传递给应用。借助这些信息,你就可以把虚拟对象放置在平坦的表面上了。
因为ARCore是通过特征点来实现平面检测的,所以对于类似白墙这类缺乏纹理的平坦表面,它可能无法准确识别。
3、深度理解
ARCore 能够借助受支持设备的主 RGB 摄像头生成深度图,该深度图包含了表面与特定点之间的距离数据。利用深度图所提供的信息,您可以打造出沉浸式且逼真的用户体验,比如让虚拟对象与实际观察到的表面精准碰撞,或者让虚拟对象呈现于真实物体的前方或后方。
4、光估测
ARCore 能够感知环境中的光线情况,为特定摄像头画面提供平均光强数据与色彩校准功能。借助这些信息,您可以让虚拟物体的光照效果与周边环境保持一致,进而增强其真实感。
5、用户互动
ARCore借助点击测试功能,获取由点按或应用支持的其他互动方式所提供的、与屏幕对应的(x,y)坐标,随后将光线投射至摄像头的世界视图里,进而返回该射线相交的所有几何平面或特征点,以及交点在现实世界空间中的姿态。通过这种方式,用户能够对环境中的对象进行选择,或是以其他形式与之互动。
6、定向点
通过定向点,您能够把虚拟对象放置在倾斜的表面上。当您进行可返回特征点的点击测试时,ARCore 会扫描周边的特征点,并利用这些特征点来尝试推算出特定特征点所在表面的角度。随后,ARCore 会返回一个包含该角度因素的姿势。因为 ARCore 是借助特征点的聚类来识别表面角度的,所以对于缺乏纹理的表面(比如白墙),可能无法准确地进行检测。
7、锚点和可跟踪对象
姿态会随着ARCore对自身位置与环境理解的深化而改变。若要放置虚拟对象,需定义锚点,以此保证ARCore能持续跟踪对象的位置变化。一般情况下,可依据点击测试返回的姿态来创建锚点,具体操作如用户互动部分所述。
姿态会出现变动,这表明ARCore或许会更新环境对象(像几何平面与特征点)的位置。平面和点属于一种特殊的对象,被称作“可跟踪对象”。正如其名,ARCore会在时间流逝中对这些对象进行跟踪。你能够把虚拟对象锚定在特定的可跟踪对象上,以此保证即便设备移动,虚拟对象和可跟踪对象之间的关系依然稳定。这就意味着,要是你将一个虚拟的Android小雕像放置在书桌上,就算ARCore之后调整了和书桌相关联的几何平面的姿态,Android小雕像看起来还是会在桌子上。
注意:为了减少CPU开销,建议尽量重复利用锚点,同时及时分离不再需要的锚点。
8、增强图像
通过增强图像功能,您能够开发出可对特定2D图像(像产品包装、电影海报这类)做出响应的AR应用。当用户把相机对准特定图片时,AR体验就会被触发。比如,用户将相机对准电影海报,就能让角色弹出并出现在画面中。ARCore同样可以追踪移动的图像,比如行驶中公交车侧面的广告牌。
您既可以通过离线编译图片来构建图片数据库,也能从设备端实时添加单张图片。完成注册后,ARCore会对这些图像及其边界进行检测,并返回对应的姿态信息。
ARCore 可在运行 Android 7.0(Nougat,牛轧糖)及更高版本系统的多款符合条件的 Android 设备上使用。在开发者预览阶段,ARCore 支持的设备如下(见下图)
后来扩大了其它设备的支持(如下图)
【动作捕捉】
借助所使用的传感器与相机,ARCore 能够精准感知位置和姿态,进而调整所显示虚拟物体的位置与姿态。
【环境感知】
感知平面,像你眼前的桌子、地面这类物体,能在虚拟空间里被精准地重现出来。
【光源感知】
利用环境光传感器来捕捉周围的光照信息,据此对虚拟物体的亮度、阴影及材质进行相应调整,使其在视觉上更自然地融入所处环境。
ARCore 能够在搭载 Android 7.0(Nougat,即牛轧糖)及更高版本系统的 Android 设备上使用。
ARCore需配合使用,无法单独开启运行。
该应用仅适配华为、小米、一加、三星、vivo这几个品牌系统版本7.0及以上的高端机型,普通机型可能无法正常运行,建议谨慎使用!
支持各种款式的,操作简单也方便。
能够在设备上增加AR图片效果,效果非常棒。
感知环境,能够精准的浮现现实的生活场景。
增强现实的感受,还能够增加自己的一些小创意。
软件功能(新版本):4.5
软件使用:4.3
应用内容:4.9
工具流畅:4.3
龙虾部署让openclaw接入本地教程!
近期”龙虾“热度暴涨,openclaw这款被大众称作"小龙虾
WorkBuddy免部署腾讯版“小龙虾”上线,下载即用!
3月9日,腾讯云正式发布全场景AI智能体WorkBuddy,
龙虾部署安装教程!龙虾部署条件详解!
此文章中提到的在最近科技圈爆火的“龙虾&rdqu
龙虾部署调动openclaw用豆包模型生成视频详解!
OpenClaw因红色龙虾图标被网友亲切称为"小龙虾",是一
千问春节瓜分30亿红包火热进行,第二阶段即将开启!
相信经过几天的互联网ai红包的攻击,很多小伙伴都收获满满,而
千问红包怎么领?活动时间与攻略详解
据阿里云数据显示,千问在2月6日上线的「30 亿免单」活动,