ARKit 进阶:物理世界

写在前面

ARKit的渲染能力是由其他框架实现的,除了苹果的SceneKit, Unity3D、UE, 或者其他自定义的OpenGL、Metal渲染引擎都可以与ARKit相结合。本文所介绍的技术都是基于SceneKit。

Demo

视频内容
视频内容

关于物理模拟

虽然物理引擎都具有真实的物理变量,如质量、重力、摩擦力等,但当我们说道物理模拟,不是要真的去用真实世界的数值去模拟物理行为,事实上那样反而会失真。我们要做的是维护好各种变量的相对关系,制造一种真实的物理感官即可。

SCNPhysicsWorld

游戏中的物理引擎用来模拟3D世界中的物理特效,使物体具备的真实的动态行为。SceneKit使用SCNPhysicsWorld来管理这种物理模拟,让物体的碰撞、连接、掉落等具有真实感。 ARSCNScene具有继承自SCNScene的默认SCNPhysicsWorld。任何添加到ARSCNScene的物理对象,都会注册到SCNPhysicsWorld中,维护其中的物理关系是重点。 利用SCNPhysicsWorld,我们主要做以下工作:

  • 管理全局的物理变量。
  • 利用其代理方法观察物理行为。
  • 使用contact/ray/convex test方法,检测物理之间的物理关系。

SCNPhysicsBody

想要一个SCNNode参与到物理模拟中,只需要给node.physicsBody赋值一个合适的值。 所有拥有physics body的node,会在render loop的physics simulation阶段,计算该node的物理行为,在接下来的渲染阶段对node做相应的变换。

image.png

一个合适的SCNPhysicsBody需要合理设置其typephysicsShapetype:

  • dynamic: 可以被碰撞、力影响。适合场景中物理引擎可以完全接管的类型,如掉落的石块。
  • static: 不受碰撞、力影响,且不能移动。适合场景中地面、墙体等。
  • kinematic: 不受碰撞、力影响,但移动的时候会影响其他body。适合场景中的角色,毕竟我们不想角色的移动不想被太多力影响。

physicsShape: 当physics body参与到物理模拟时,一个更贴合的形状能得到一个更令人满意的结果。但是对于一个比较复杂的几何体,简单的convex会显得过大,concave又会太复杂影响性能。这种情况可以使用若干个简单的形状拼装一个相似的形状,或者由设计给出一个合理的形状,总之形状的选择要平衡性能与真实感。

body category

一个场景中会有许多node,需要给他们设置category,让我们只关注感兴趣的碰撞、接触。尤其要注意的是它们各自的默认值,不然很容易出现bug。 categoryBitMask: 指定body的类型, dynamic/kinematic body默认为1,static body默认为2。 collisionBitMask: 指定能与该body产生碰撞的physics body类型。默认是-1,即每位都置1。 contactTestBitMask: 指定哪种类型的physics body与该body发生接触(几何体交叉)后,通知给physics world。 这个属性在OSX10.11和iOS9以上默认值是0,以下与collisionBitMask相同。

记住重设physics body时,要恢复这些值

注意SCNNode也有一个categoryBitMask,用法与这个类似。但在scene test时,这两个容易搞混。这里吐槽以下苹果的命名。

SCNPhysicsShape

当物理引擎检测碰撞时,使用的是SCNPhysicsShape来计算结果,除了性能,我碰到两个关于physicsShape的问题:

  1. 如果node.geometry是不可见的,那个虽然它有physics shape,在调试时也会显示,但不会参与物理模拟。
  2. SceneKit的物理引擎是不支持缩放变换的。如果一个node做缩放变换后,physics body将仍是原来的尺寸。这种情况看我的回答,重点是当attach body之前如果没有指定形状,那么SceneKit才会使用scale信息,使用SCNPhysicsShapeScaleKey也有一样的效果。
//still has identity scale
SCNPhysicsBody *body = [SCNPhysicsBody bodyWithType:SCNPhysicsBodyTypeKinematic shape:[SCNPhysicsShape shapeWithGeometry:ramp.geometry options:nil]];
//this did worked
SCNPhysicsBody *body = [SCNPhysicsBody bodyWithType:SCNPhysicsBodyTypeKinematic                                                     shape:nil];

SceneKit automatically creates a physics shape for the body when you attach it to a node, based on that node’s geometry property

物理模拟与其他动画的冲突

从SceneKit的render loop可以看到,物理模拟实际上也是一种动画,只不过动画的参数由物理引擎控制。SceneKit也遵循iOS的传统,具有隐式、显式动画,同时有SCNAction接口。由于物理引擎 是将所有的计算结果应用到动画层上,即node.presentationNode,这会让新加入的动画显得不正常。因为其他动画的初始值是从node.transform中读取的。对于这种问题,需要读出node.presentationNode.transform的值用于动画的初始值。

process of collision

对于简单的碰撞,只要设置好physics body和category bit mask,collision bit mask等参数,其他的就由物理引擎接管了。 碰撞的处理过程由3个部分组成。

collision detection

物理引擎会在渲染时检测物体之间的physics body是否发生重叠,这一过程我们可以通过中的方法观察。

collision determination

与操作两个物体的之间的categoryBitMask和collisionBitMask,若返回非0,则发生碰撞。

collision respond

物理引擎会在渲染之前,计算物理碰撞的结果并应用到物体上。

contact test

当有两个物体相接触,若categoryBitMaskcontactTestBitMask相与不为零,那么会调用的方法。很显然这个结果的集合是小于碰撞结果的。通过这个方法,我们能够控制两个物体之间的碰撞,这在物理引擎接管的碰撞动画不理想时,是非常有用的。 当接触发生时,代理方法会传来SCNPhysicsContact对象,它包含了接触的对象、部位、法线与重叠距离。通过它可以修正错误的动画。例如我将一个石块从高处坠落,如果速度特别大,那么它会直接穿过底部的平面。因为在render loop的渲染时,两者相接触的那一帧在物理模拟时,石块已经大部分穿过了平面,这样在下一帧石块会直接穿过去,而不是回弹。可以看我的回答

scene test

SceneKit与ARKit中共有以下几种scene test,用以观察世界中的物体关系,作用类似UIKit的 hitTest: 方法。

AR scene test

//ARSCNView
- (NSArray<ARHitTestResult *> *)hitTest:(CGPoint)point 
                                  types:(ARHitTestResultType)types;

根据ARSCNView中的点,构造一条3D世界的射线,搜索ARAnchor或真实物体(特征点或已检测出的平面)。 scene test

//SCNSceneRenderer
- (NSArray<SCNHitTestResult *> *)hitTest:(CGPoint)point 
                                 options:(NSDictionary<SCNHitTestOption, id> 
                                 
//SCNNode
- (NSArray<SCNHitTestResult *> *)hitTestWithSegmentFromPoint:(SCNVector3)pointA 
                                                     toPoint:(SCNVector3)pointB 
                                                     options:(NSDictionary<NSString *,id> *)options;

第一个方法:根据SCNSceneRenderer(SCNView等)中的点,构造一条3D世界的射线,搜索与射线相交的几何体,node.geometry为nil则忽视。 第二个方法:在目标node的局部空间中,搜索与pointA-pointB线段相交的子node。

physics body test

//SCNPhysicsBody
- (NSArray<SCNHitTestResult *> *)rayTestWithSegmentFromPoint:(SCNVector3)origin 
                                                     toPoint:(SCNVector3)dest 
                                                     options:(NSDictionary<SCNPhysicsTestOption, id> *)options;
- (NSArray<SCNPhysicsContact *> *)convexSweepTestWithShape:(SCNPhysicsShape *)shape 
                                             fromTransform:(SCNMatrix4)from 
                                               toTransform:(SCNMatrix4)to 
                                                   options:(NSDictionary<SCNPhysicsTestOption, id> *)options;

第一个方法:在物理世界中,返回在两点之间的physics body所属的node。 第二个方法:在物理世界中,按form-to变换滑动指定的形状,返回相交的physics body所属的node。

contact test

//contact test
- (NSArray<SCNPhysicsContact *> *)contactTestBetweenBody:(SCNPhysicsBody *)bodyA 
                                                 andBody:(SCNPhysicsBody *)bodyB 
                                                 options:(NSDictionary<SCNPhysicsTestOption, id> *)options;
- (NSArray<SCNPhysicsContact *> *)contactTestWithBody:(SCNPhysicsBody *)body 
                                              options:(NSDictionary<SCNPhysicsTestOption, id> *)options;

第一个方法:检测物理世界中,两个body是否发生接触,返回所有的接触点。 第二个方法:返回所有在物理世界中与指定body发生contact的node。

最后

物理引擎能够帮助我们模拟真实世界的效果,虽然高级的特效一般都是自己在渲染循环中实现的,但它大大减轻了我们计算成本。拥有良好的物理特效,能够让用户有真实的感受,希望本篇文章能够帮助大家。

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏java一日一条

如何用Python写一个贪吃蛇AI

这两天在网上看到一张让人涨姿势的图片,图片中展示的是贪吃蛇游戏, 估计大部分人都玩过。但如果仅仅是贪吃蛇游戏,那么它就没有什么让人涨姿势的地方了。 问题的关键在...

29020
来自专栏liuchengxu

STARKs, Part I: 多项式证明

相信很多人都听过 ZK-SNARKS,一个通用而简洁的零知识证明技术,从可验证计算到需要隐私保护的加密货币,它可以被应用于各类场景。不过,可能你还不知道现在 Z...

8930
来自专栏数据小魔方

excel规划求解

今天要跟大家分享的是excel的规划求解的功能! excel的规划求解功能据说很强大,可以求解很多线性规划和其他最优化问题。 但是这个功能我们日常使用的频率却一...

35850
来自专栏量子位

摄像头训练的吃豆人,我还是没活几集 | TensorFlow.js

上个周末,面向JavaScript开发者的TensorFlow.js在TF开发者峰会上发布。

12420
来自专栏量子位

Tile:一个崭新出炉的机器学习语言

千平 编译整理 量子位 出品 | 公众号 QbitAI Vertex.AI之前发布了一套机器学习框架PlaidML。据他们自己说,PlaidML在英伟达GPU上...

41660
来自专栏技术翻译

用Python从头开始构建一个简单的聊天机器人(使用NLTK)

我相信你一定听说过Duolingo:一款流行的语言学习应用。它以其创新的外语教学风格而广受欢迎,其概念很简单:一天五到十分钟的互动训练就足以学习一门语言。

1.1K10
来自专栏大数据文摘

R语言的igraph画社交关系图示例

38290
来自专栏CDA数据分析师

盘点丨2018 年热门 Python 库丨TOP20

在解决数据科学任务和挑战方面,Python继续处于领先地位。去年,我对当时热门的Python库进行了总结。今年,我在当中加入新的库,重新对2018年热门Pyth...

20220
来自专栏WindCoder

iOS ARKit教程:赤手在空中绘画

这次推荐的是ios上的文章,无奈ios上的东西没接触过,权且当做开拓视野了。老规矩,原文如下:

20010
来自专栏PPV课数据科学社区

文本挖掘小探索:避孕药内容主题分析

作者:冯大福 舆情监测一直是众多品牌关注的地方,尤其品牌想知道在品牌推广,品牌策略,品牌广告中出现的问题,从而能进行策略上的改进,但是现在很多人都是读帖子,笔者...

37660

扫码关注云+社区

领取腾讯云代金券