iOS ARKIT如何在移动摄像头时显示圆形图像/模型而不是PlaneGeometry？ - 腾讯云开发者社区 - 腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

建立您的第一个AR体验

下载软件开发工具包 iOS 11.3+ Xcode 10.0+ Beta 概观此示例应用程序运行ARKit世界跟踪会话，其内容显示在SceneKit视图中。...ARWorldTrackingConfiguration() configuration.planeDetection = [.horizontal, .vertical] sceneView.session.run(configuration) 仅当将显示它的视图显示在屏幕上时才运行会话...当您将内容添加为与锚对应的节点的子节点时，类会自动移动该内容，因为ARKit会细化其对平面位置的估计。...平面锚点geometry描述了一个凸多边形，紧密包围了ARKit当前估计属于同一平面的所有点（使用ARSCNPlaneGeometry时很容易可视化）。...class ARWorldTrackingConfiguration 使用后置摄像头的配置，跟踪设备的方向和位置，并检测真实世界的表面，以及已知的图像或对象。

1K2 0

ARKit示例 - 第2部分：平面检测+可视化

ARKit - 检测到平面并映射到楼层在我们的第一个hello world ARKit应用程序中，我们设置了我们的项目并渲染了一个虚拟3D立方体，可以在现实世界中渲染并在您移动时进行跟踪。...增强现实的目的是能够在特定点将虚拟内容插入到现实世界中，并在您在现实世界中移动时拥有虚拟内容轨道。使用ARKit，其基本过程包括从iOS设备相机读取视频帧，为每个帧处理图像并提取特征点。...获得图像的功能后，您可以跟踪多个帧的功能，当用户在世界各地移动时，您可以获取这些相应的点并估计3D姿势信息，例如当前摄像机位置和位置。特征。...快速移动 - 这对于ARKit来说是主观的，通常如果您只使用图像来检测和估计3D姿势，如果您移动相机太快，最终会出现模糊图像，导致跟踪失败。...，你可以看到当你移动ARKit时不断出现新的飞机，这很有趣，因为如果你正在开发一个应用程序，用户首先必须在一个空间中移动才能放置内容，当几何形状足够好使用时，为用户提供良好的视觉线索是很重要的。

2.9K2 0

您找到你想要的搜索结果了吗？

是的

没有找到

iOS ARKit教程：赤手在空中绘画

为了实现这一目标，ARKit假设你的手机是一个在真实3D空间中移动的摄像头，这样一来，在任何时候，任何一个3D虚拟物体都会被固定在3D空间的那个点上。...焦点方是由样例代码提供的，而不是ARKit库，这是我们开始使用这个示例代码的主要原因之一。您可以在示例代码中包含的readme文件中找到更多关于它的信息。...对于手指的每一个新位置，我们将在检测到的计划上放置一个非常小的圆形，几乎为零的高度。它会显示为一个点。旦用户完成绘图并选择3D按钮，我们就会根据用户手指的移动来改变所有掉落的物体的高度。...在三维模型中，我们估计了与最后位置的不同，并增加/减少了所有点的高度。到目前为止，我们正在绘制被探测的表面，假设虚拟笔位于屏幕的中心。现在，有趣的部分——可以检测用户的手指并使用它而不是屏幕中心。...以下图像显示了Vision库可以检测到的特征点： ?

1.8K1 0

ARKit 的配置-在您的AR项目的幕后

在本节中，我们将看看如何在后面配置提供的ARKit模板。我们将发现什么是世界跟踪和AR会话。同样，我们将学习如何将一些调试选项应用于场景中的指导。...当您开始体验时，会话开始。你能告诉我另一个用于ARKit的流行技术的例子吗？让我给你一个提示：Animoji。这是正确的，它是面部跟踪，如果你第一次购买iPhoneX，你可能会有很多乐趣。...默认情况下，已在模板中写入的显示消息为此应用程序将使用摄像头进行增强现实。如果您想从头开始AR应用程序，这是必须的步骤。 ?...顺便说一句，您也可以单独显示它们而不使用方括号。世界原点世界原点是视图加载时摄像机的起始位置。您可以使用箭头看到它，就像在场景编辑器中一样。如果您四处移动，会话会记住该位置，使其保持静止。 ?...如果没有泛光灯，此图像显示激活默认照明与否之间的区别。亲自看看吧！ ? WatchSceneComparison 结论虽然可以从一开始就使用模板，但了解它的结构非常重要。

2.5K2 0

ARKit上手添加3D物体

的功能，下面简单介绍ARKit的工作原理： ARKit工作原理在ARKit中，创建虚拟3D模型其实可以分为两个步骤：相机捕捉现实世界图像–由ARKit实现在图像中显示虚拟3D模型/2D模型–由SceneKit...在一个完整的AR体验中，ARKit框架只负责将真实世界画面转变为一个3D场景，这一个转变的过程主要分为两个环节：由ARCamera负责捕捉摄像头画面，由ARSession负责搭建3D场景，而将虚拟物体显示在...当ARWorldTrackingSessionConfiguration计算出相机在3D世界中的位置时，它本身并不持有这个位置数据，而是将其计算出的位置数据交给ARSession去管理，而相机的位置数据对应的类就是...ARSession ARSession通过管理ARSessionConfiguration实现场景的追踪并且返回一个ARFrame(添加3D物体模型时计算3D模型相对于相机的真实矩阵位置时需要使用) 给...本文将会使用ARKit创建一个简单的app，结束时就可以在AR世界里放置3D物体，并且可以用iOS设备绕着它移动。

2.1K1 0

iOS ARKit教程：用裸露的手指在空中画画

例如，当开发人员从移动摄像头访问各个帧时，AR炒作再次起飞。除了伟大的兔子变形金刚的强大回归，我们看到一波应用程序在打印的QR码上放下3D对象。但他们从未作为一个概念起飞。...这就是为什么ARKit在面向无特征的白色墙壁时放置时或者当设备移动得非常快而导致图像模糊时无法正常工作的原因。...iOS中的ARKit入门截至撰写本文时，ARKit是iOS 11的一部分，它仍处于测试阶段。...Focus Square由示例代码提供，而不是ARKit库，这是我们开始使用此示例代码的主要原因之一。您可以在示例代码中包含的自述文件中找到有关它的更多信息。下图显示了投影在桌子上的焦点方块： ?...它通常是在点击识别器中编写的代码的反转：最后，我们将self.lastFingerWorldPos在绘图时使用而不是屏幕中心，我们就完成了。

2.2K3 0

灯塔原创|苹果如何稳住阵营，在AI、AR大战中自成一派？

Core ML具备了深度神经网络、卷积神经网络、线性模型等诸多特性，能够帮助开发者在iOS和watch OS上进行AI开发。...在应用程序上，Messages有了重新设计的应用程序抽屉；转账功能上，支持了个人向个人转账功能；人像模式图像处理上，iOS11中，人像模式图像质量更高，照片库更加智能，可以识别更多种类的活动，如婚礼，婴儿淋浴等...同时，iOS11针对中国市场推出了几项功能，QR二维码、短信扩展、交通摄像头提醒、上海话探测、10键拼音输入法等等，宝宝们惊不惊喜，意不意外？三、ARKit 助力iOS 成为最大AR 平台？...从功能上来看，苹果 ARKit可以通过摄像头对环境进行扫描识别，结合 SLAM 等计算机视觉技术，将虚拟的物体融合到真实的世界里。 ?...但这不是仅仅的图像叠加，当你移动手机而保持物品固定时，苹果在物体的一些细节上也做得很棒。凭借对软硬件的完全控制。

7288 0

ARKit

ARKit结合了设备运动跟踪，摄像机场景捕捉，高级场景处理和显示便利性，简化了构建AR体验的任务。您可以使用这些技术使用iOS设备的后置摄像头或前置摄像头创建多种AR体验。...使用后置摄像头增强现实感最常见的AR体验类型显示来自iOS设备的后置摄像头的视图，并通过其他可视内容进行扩充，为用户提供了一种查看周围世界并与之交互的新方式。...在iOS 12中，当您在应用程序中使用USDZ文件时，系统会为3D对象提供AR视图，或者在Web内容中使用带有USDZ文件的Safari或WebKit。...例如，您可以在摄像机视图中显示用户的面部并提供逼真的虚拟遮罩。您还可以省略摄像机视图并使用ARKit面部表情数据为虚拟角色设置动画，如iMessage的Animoji应用程序中所示。...使用ARKit实时使用Vision 管理Vision资源以有效执行Core ML图像分类器，并使用SpriteKit在AR中显示图像分类器输出。

2.2K2 0

ARKit 简介

ARKit 简介苹果在AR一直布局VR，最近的苹果开发者大会上，果家终于放出大招：iOS移动端ARKit平台以及VR兼容新桌面操作系统macOS High Sierra。...硬件环境：iPhone或者iPad 的iOS11 beta版本。...处理器A9及以上（6S机型及以上）实现步骤一个简单的AR场景实现所需要的技术和实现步骤如下： 1.多媒体捕捉现实图像：如摄像头 2.三维建模:3D立体模型 3.传感器追踪:主要追踪现实世界动态物体的六轴变化...其中位移三轴决定物体的方位和大小，旋转三周决定物体显示的区域。 4.坐标识别及转换：3D模型显示在现实图像中不是单纯的frame坐标点，而是一个三维的矩阵坐标。...而ARKit的核心就是ARSession，下面我们将一步步实现一个简单的ARKit场景。

2.5K6 0

苹果的增强现实框架：ARKit

ARKit [1504061643189_3471_1504061643487.png] AR(Argument Reality)大家都知道，就是将3D模型渲染在摄像头图像之上，混合渲染达到虚拟物品就好像是现实的一部分...答：ARKit通过图像的环境来设置模型的环境光强度，而环境光是不产生阴影的。（我猜苹果应该是通过像素值来确定环境光的，如果用高级一点的方法完全可以添加直射光。...ARKit并不是一个用于前置摄像头环境的技术，因为空间有限，能提供的信息也非常有限。...（这个问题是很多参会者关心的问题，但 ARKit 团队似乎不是很 care ，说到底还是因为前置摄像头的场景中，用户很少会移动，画面中一般大部分都是人脸，这样 ARKit 的定位与检测能力无法很好使用。...建议由类似需求的同学好好梳理，是不是想要的是3D渲染而不是AR。） 6 . ARKit的最大应用范围是多少？答：100米是 ARKit 在保持较好用户体验的最大测量距离。

3.2K0 0

ARKit 到底怎么实现的

app or game 集成iOS设备摄像头和运动功能，在你的应用程序或游戏中产生增强现实体验我写过一个小实例100行代码实现手机AR,有兴趣的可以去看看,这个demo 也是ARKit 的原理介绍...对于每一帧，ARkit分析图像,通过从装置的运动传感硬件来判断设备的实际位置数据 ARCamera 代表 AR会话中捕获的视频帧的摄像机位置和成像特性的信息 ARSessionConfiguration...场景配置,这种配置下,手机位置不动,旋转手机,能够看到,模型相对环境的角度不会改变,但是如果移动手机,模型的位置就会变化 ARWorldTrackingSessionConfiguration...旋转手机或者移动手机,模型的位置和角度都不会变化接下来演示一个demo 给大家看看第一步创建一个工程 ?...,如果想要学习AR 开发, 难点不是ARKit 框架,而是苹果在 2014 年推出3D游戏引擎框架SceneKit，这个框架至今没有被重用,但是相信AR 会让这个框架火起来,在年初我已经将SceneKit

1.1K1 0

【机器学习爆款App技术解读】如何用“摄像头秒解数独”

Magic Sudoku（魔法数独）是一款基于苹果 ARKit 的 iOS 应用，能够“用摄像头解开数独”——用户只需将摄像头对准空白的数独题目，拍摄一下，瞬间就能得到答案，对于那些被特别难的数独题困扰的人来说...这个应用程序的基本流程是： 1）ARKit 从相机获取新的帧； 2）使用 iOS 11 的 Vision Library 检测图像中的矩形； 3）如果找到矩形，确定它们是不是数独； 4）如果发现是数独，...模型传回 ARKit，显示在原始相机图像的上面所有这些在每秒钟内都会运行好几次。...问题二是苹果的 ARKit 只支持水平面，比如桌子和地板（而不支持竖直面，比如显示器）。解决这个问题比较棘手，但我确实提出了一个解决方案。...我怀疑训练瓶颈是磁盘而不是计算。上云也很贵。

1.5K8 0

使用ARKit开发AR游戏-基础篇：ARKit入门篇

当您的应用程序显示虚拟内容与实时摄像头图像，用户会感受到增强的现实：产生虚拟内容是真实世界的一部分的错觉。...arkit2.jpg arkit3.jpg arkit4.jpg 移动设备和SDK方案由移动硬件相机驱动，提供一个“窗口”进入。可以看到现实世界与AR的对象。...产生一个点云的粒子效果相同工具脚本 UnityARAmbient.cs 从SDK时间回调设置光强度建议：通用小技巧使用EeaturePoint 如果你需要碰撞检测速度更快，而不是更高的精度...，优先使用Feature Points，而不是平面检测。...使用真实世界大小 Unity中的1个单位表示一米，在放置对象和创作内容时需要考虑到这一点。考虑对象交互沿着放置的平面移动物体。

4.4K5 1

ARKit：增强现实技术在美团到餐业务的实践

但如官方文档所言，它也有两个致命的缺点：受环境光线质量影响受剧烈运动影响由于在追踪过程中要通过采集图像来提取特征点，所以图像的质量会影响追踪的结果。...在光线较差的环境下（比如夜晚或者强光），拍摄的图像无法提供正确的参考，追踪的质量也会随之下降。追踪过程中会逐帧比对图像与传感器结果，如果设备在短时间内剧烈的移动，会很大程度上干扰追踪结果。...ARSCNView 是 SCNView 的子类，它做了三件事：将设备摄像头捕捉的每一帧的图像信息作为 3D 场景的背景将设备摄像头的位置作为 3D 场景的摄像头（观察点）位置将 ARKit 追踪的真实世界坐标轴与...点击散开的卡片数量太多对用户不是很友好。后台在返回用户附近的商家数据时，按照商家的经纬度坐标，使用 K-Means 聚类算法进行二维聚类，将距离很近的商家聚合为一个卡片。...深度冲突深度缓冲技术在处理具有相同深度的像素点时，会出现深度冲突（Z-fighting）现象。这些具有相同深度的像素点在竞争中只有一个“胜出”，显示在屏幕上。如下图所示： ?

2.1K2 0

ARKit 初探

今年7月Apple推出了AR工具ARKit，着实闪着了大家的眼睛。从目前的评测可以知道 ARKit已经非常成熟，完全可以进行商用了。在iOS中，增强现实由ARKit和渲染两部分组成。...什么是特征点 AR 的目标是往真实世界中的特定点插入虚拟内容，并且在真实世界中移动时还能对此虚拟内容保持追踪。 ARKit 从视频帧中获得某张图片的特征后，就可以从多个帧中追踪这些特征。...快速移动通常情况下检测和估算 3D 姿态只会借助图片，如果摄像头移动太快图片就会糊，从而导致追踪失败。但 ARKit 会利用视觉惯性里程计，综合图片信息和设备运动传感器来估计用户转向的位置。...追踪我们手动添加的希望追踪的点，例如我们手动添加的一个虚拟物体 ARKit 使用视觉惯性测距技术，对摄像头采集到的图像序列进行计算机视觉分析，并且与设备的运动传感器信息相结合。...这是因为手机屏幕一个是长方形的二维空间，而相机捕捉到的是一个由这个二维空间映射出去的长方体。我们点击屏幕一个点，可以理解为在这个长方体的边缘射出一条线，这一条线上可能会有多个3D物体模型。

2.3K2 0

ARKit和CoreLocation：第一部分

ARKit结合了设备运动跟踪，摄像机场景捕捉，高级场景处理和显示便利性，简化了构建AR体验的任务。在iOS 11中，Apple已经将ARKit的强大功能释放到了iOS开发社区。...我们还有几个星期的iOS 11上线，但我们已经看到的可能会重新定义移动用户体验的可能性。首先，一些基础知识 ? 个人项目 - 8月20日那么，它真的很棒吗？...我不想成为那个说这个的人，但不是，这只是数学。所以，如果它不是魔术，他们怎么把它拉下来？视觉惯性测距！（快说十倍。）...定义视觉惯性测距（VIO）：ARKit分析手机摄像头和运动数据，以便跟踪周围的世界。计算机视觉记录了环境中的显着特征，无论iPhone的移动如何，都能够保持对现实世界中位置的了解。...SCNGeometry：可以在场景中显示的三维形状（也称为模型或网格），附加材料定义其外观。

2.2K2 0

ARCore 初探

Android开发者兴奋不已，两家公司的竞争态势也蔓延到组内移动端两股开发势力，前几个月隔壁iOS组的同事可都是鼻子朝天走路的。...而大部分手机虽然可以进入应用，但是只是在底部提示“Searching for surfaces…”，主要的显示区域也是黑屏，并不能使用ARCore的主要功能。...ARCore VS ARKit 首先了解下ARKit的基础知识。ARKit是一种为iOS构建增强现实的框架，意在实现将虚拟内容精确且真实地浸入真实世界场景上。...建图定位：ARCore和ARKit都使用了离散点云图，跟踪器会提前去判断是否有预加载的图，没有的话就自定义新的模型，会获取到相机视角下的一个3D范围。...当你移动设备时，摄像头会捕捉到新的一图像，并加载到之前新建的3D模型中，不断增加内容。

6.1K1 1

iOS版使用ARKit和Swift创建交互式Domino游戏

接下来，需要Xcode 9（或更高版本）和运行iOS 11（或更高版本）的ARKit支持的设备。现在让我们开始吧！设置初始ARKit场景打开Xcode并选择File> New Project。...更改为let scene = SCNScene()，因为我们只想要一个空场景而不是宇宙飞船！平面检测我们要做的第一件事是添加plane detection到我们的场景中。...4.png 现在，多米诺骨牌被放置在一个漂亮而均匀的距离。多米诺取向由于多米诺骨牌在首次创建时没有给出旋转值，因此它们都面向相同的方向。...如何在保持隐形的同时为地板添加阴影？自iOS 11以来，SceneKit已经添加了一个新策略来实现这一目标。...这将使我们的阴影看起来更加灰色和逼真，而不是默认的深黑色。为了将光添加到场景中，它必须附加到节点。当在SceneKit中首次创建光源时，它默认指向-Z方向（直线向前）。

2.3K3 0

关于ARkit

但是在第一时间更新到ios11，并体验了AR游戏应用后，很容易产生一种，『哇，这就是未来的感觉』但是实际上冷静下来以后，就会发现其实大部分AR应用只是在以往的『图像识别』的基础上，进行『无图像识别』的操作...相对而言，我更喜欢ARkit所展示出来的另一个效果：『空间检测』。 ? 不过缺少了酷炫的模型，这个逆天的能力反而没有太让人产生惊艳的感觉。其他的AR效果就不贴图了。...和以往的『在模型后面拉起个摄像头』难度差不太多。而第二种，是真正让人感觉到AR未来的技术点。然而由于门槛性以及平台性，现阶段其实也只能看个热闹。 ---- 『为啥你觉得AR可以改变世界的？...难道不是因为AR可以改变世界，所以才会想接触这个神奇的东西么？很多人会拿VR做示例，说这些不过是一时的科技热点，蹭个热度就好了。『你看，过了VR元年，热潮过去以后不就冷却了？...前面提到的都是ios的ARkit，不过对web端来说，谷歌才是大佬，苹果简直…… 『你听说过IE6吗？』『啊？你说苹果是移动端的IE6？』『没有，我没这么说。』

7728 0

ARKit浅析V1.0

增强现实技术（Augmented Reality，简称 AR），是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。...需要注意的是，ARKit虽说是iOS11提供的框架，但是并非升级到iOS11都能使用。必须要A9以及以上的处理器才能使用。...Xcode9对Mac系统版本有要求）二、ARKit工作原理和流程首先需要说明的是，ARKit并不是一个能够独立运行的框架，其依赖SceneKit框架。...简单点说，ARKit框架主要提供相机相关的工作，主要负责捕捉和分析现实世界。而展示虚拟物体部分，则是依赖SceneKit提供的能力。如果没有SceneKit，那ARKit只是一个相机而已。...比如我们在相机中移动。

1.7K5 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭