惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

博客园_首页
B
Blog
V
V2EX
T
Tailwind CSS Blog
Hugging Face - Blog
Hugging Face - Blog
博客园 - 【当耐特】
博客园 - 聂微东
博客园 - 叶小钗
博客园 - 三生石上(FineUI控件)
The Cloudflare Blog
J
Java Code Geeks
H
Help Net Security
雷峰网
雷峰网
Apple Machine Learning Research
Apple Machine Learning Research
H
Hackread – Cybersecurity News, Data Breaches, AI and More
Engineering at Meta
Engineering at Meta
F
Fortinet All Blogs
Martin Fowler
Martin Fowler
D
Docker
L
LangChain Blog
人人都是产品经理
人人都是产品经理
爱范儿
爱范儿
WordPress大学
WordPress大学
V
Visual Studio Blog

少数派

派早报:Google 发布 Fitbit Air 等 - 少数派 「新人报到」確認需求,再開始 - 少数派 从 SOLO 独立开发者社区,我看到了越来越多开发者开始做自己的产品 - 少数派 我怎么管理那些"不常做,但总会忘"的生活事项 - 少数派 人形机器人量产元年,数据才是具身智能的“生死线” - 少数派 BuhoLaunchpad 高度还原 Mac 启动台:开发历程与思考 - 少数派 五年陪伴依然不舍,DIY 换壳后让罗技 MX Master 3 继续服役 - 少数派 新玩意 240|少数派的编辑们最近买了啥? - 少数派 一日一技|为什么你应该关闭 iOS 的键盘声音 - 少数派 我做了个插件和 Skills,一键提取任何网站的设计规范 Design.md - 少数派 住在三四线城市的你,该开始录播客了 - 少数派 甘南秘境,大白高国 - 少数派 AI的审美:谁让把我变成川内倫子 - 少数派 返工怎能不烦恼,打工人片单总有一部是你的「嘴替」 - 少数派 为了让「上厕所」更健康,我做了一个小工具 - 少数派 AI + Skill,能够让生成的文章去除 AI 味吗? - 少数派 新玩意|韶音OpenDots ONE 耳夹式耳机 - 少数派 《美满》| 在每一个春天的晚上相爱(362) - 少数派 新玩意|优篮子 PS01 MagSnap 磁吸支架 - 少数派 自我整合手记 | 我开始早睡了:用稳定规则,为自由托底 - 少数派 用龙虾(OpenClaw)两个多月,我最深的12个体会 - 少数派 听歌时间到,12 张你可能错过的 2025 华语乐坛好专辑 - 少数派 承诺能追吗 - 少数派 macOS 26启动台没了? 我做了个不一样的App启动器 - Keboard - 少数派 《四海为家的人》| INTJ对话INTJ(361) - 少数派 你发过的那些黑历史,是时候一次清干净了 - 少数派 新玩意:安安静静玩,越玩越专注:计客密码机 - 少数派 iPad 用户首次体验 Android 平板:vivo Pad6 Pro - 少数派 数据逻辑强 - 少数派 极北行+ | 一路向北,探访日本至北之地 | 001 - 少数派
[iOS开发经历]增强现实入坑全流程 - 少数派
2018-01-26 · via 少数派

以此记录开发App的感受,望结识更多同道中人

     今年秋季,Apple发布了增强现实开发工具ARKit。被其吸引,决定入坑。作为曾经的CG从业人员,深知转型的困难,但最终选择开始Swift程序语言的学习。以下所涉及到的可能是每一个开发者都会经历的开发工具,站点,过程等。

iOS平台ARKit

ARKit需求设备的门槛,iOS 11以上系统环境A9处理器或以上的设备(iPhone SE,6S以上或iPad Pro以上),这让大部分人没有机会接触到最新的增强现实(Augmented Reality),当然此刻的ARKit技术仍然还在不断完善中,最近也发现iOS 11的更新版本都会涉及到ARKit的bugfix和upgrade,加之有消息报道在今年ARKit可能会引来两个比较大的更新 [持续跟踪]和[空间共享],还是比较期待的。撰写文章之际,ARKit迎来1.5版本的更新,加入特征图片识别功能,垂直面识别自动对焦以及不规整平面的识别

ARKit 1.5 更新

     好在手上的设备也能够满足开发环境,6s和MBP并不需要新购买,所以就这样就开始了。由于有CG知识储备,比较顺利完成对引擎的学习-SceneKit。没有选择UnityUE4是因为当时还没有出现Google的ARCore,不存在跨平台需求(目前两个常用引擎均以插件形式出现),后续也将更新安卓平台应用。Google的ARCore紧跟入场,代表着AR方向的认同,只是谁也不知道AR会否经历像VR一样的历程。

安卓平台ARCore

      开发中,遇到问题Google,查阅Stack Overflowgithub,在经历一段时间入门后,Xcode算是熟悉了,也渐渐清晰对App开发流程的理解。

      因开发进度的原因,没能赶上iOS 11发布所带来的热度,不过翻遍了所有基于ARKit开发的App,在预料之中的是以下类型:拍摄,工具,居家。而这些类型的App无不是大厂虎视眈眈。

      最终选择了App开发难度不大,但大众了解的恐龙。同时在测试的过程中,憧憬真实恐龙在面前的感受。ARKit简单来说可以侦测任意平面,也就是说,可以将任何3D物件放置在真实空间的地面上并且保持空间关系匹配。但当下也有比较拙劣的AR(直接放3D物体覆盖在摄像机拍摄到的画面前,与真实空间无任何关系)在透支着AR的未来。

      就这样,待iOS 11发布会之时,意料之外出现了另外一个恐龙App,意识到开发周期太长,其实大量的时间都花在了每个恐龙的制作上。

《公园的翼龙》-室外晴朗 - 6s直出

     或许是曾经CG从业人员的缘由,接受不了拙劣的模型放在真实空间。制作过程中,涉及到包括每只恐龙的配音,动作,控制,材质,贴图,模型,雕刻,比例和基础数据,这花费了大量的时间,可能对于游戏公司来说这是再普遍不过,但对于独立开发者还是经历了不少时间的打磨。

《迅猛龙诞生地》-室内桌面,6s直出

不能发视频?测试时拍摄了很多视频,遗憾不能放出来了。

      在定价上,最终选择了付费模式(无内购)。或许大部分人还是会选择免费App,恐龙是值得严谨的!最初心想要把所有恐龙都做好再上线,一心想把完整的产品给大家,所以直到现在才发布。然而其他恐龙App选择的是先上线再更新的策略(付费下载加内购和广告),所以部分先行者体验到了仅有的一两只恐龙。

《阴雨天的长脖子》-马门溪龙-6s直出

【恐龙魔盒AR】选择覆盖大部分经典恐龙

主要特征:

  • - 在真实世界与恐龙互动
  • - 电影特效场景般的拍照与录像
  • - 自由控制真实世界恐龙行动
  • - 多种经典恐龙及科普知识
  • - 任意比例版本恐龙(默认真实比例)

App功能尚需不断完善,欢迎评论建议

《奔跑中的迅猛龙》-拍摄视频提取帧-6s直出

ARKit在使用层面并不复杂,因Apple已将它整合好并大力发展,所以如果你对于这项技术感兴趣或者你有一些相关疑问,欢迎打扰。


App SnapShot

到近期AppStore上线,发布时间点的重要性不言而喻,或者这是一个尝试。在经历整个开发过程后,也对增强现实有了新的理解,AR必将成为未来的交互形式。

  • 降低交互成本
  • 降低认知成本
  • 降低注意力转移

或许未来会新开坑,也非常乐意与你探讨想法。

      最近ARKit的热度下降也表明市场的不断理智与成熟,当下它仍然只是在不断成熟中的新技术,随着1.5版本的更新,ARKit或许在不久取代Vuforia(Marker Based AR),ARKit和ARCore更加强调识别空间,在链接现实和虚拟之间,它们已踏出了第一步。

单从增强现实技术来说,整个发展路径或许划分为三个阶段

  1. 识别真实空间并与真实空间匹配(当下,需更稳定高效、能耗、遮挡等其他问题)
  2. 有限条件下真实空间与虚拟空间持续匹配(近年,局部空间)
  3. 真实空间与虚拟空间持久匹配(远期,AR Cloud-全局空间)
《卖汽油的恐龙》- 阴天 - 单反拍摄

     开发完成后AppStore商店的预览视频素材由几个小时拍摄完成,这要是放在曾经的影视后期流程来做,不知道要花多少时间。还有很多在制作完成后拍摄的素材没能用上,所有内容素材均直接来自App录制或拍摄,仅做剪辑和加字幕处理,视频请跳转至AppStore查看(网页浏览不加载视频)。

      为了让恐龙可以在真实世界中运动,并且在真实世界不“滑步”。每只恐龙单独考虑动作和移动单位。同时比例可以缩放,默认为恐龙1:1真实比例。所以你可以自由地在真实环境中观察,操控恐龙行走以及交互。

《尾随三角龙》-阴雨天-6s视频提取帧

      在材质光照上,因为有ARKit的光照侦测技术,所以较大部分情况下,已能得到接近真实的质感。真实环境的光线强度范围是很大的,所以曝光能满足所有情境还是有非常大的难度,这一点或许略懂摄影的都清楚,需要注意的是HDR光照图的调试和PBR Shader材质,每只恐龙都制作高精度模型并生成Normal贴图,可以对比其他恐龙App的光照,基本上很暗并且效果不甚理想。

《暗环境测试》-iPhone 6s拍摄直出

在交互上,触摸恐龙身体会激活恐龙特有动画效果,随后会根据情况加入更多,放上链接

      至此,一系列的AppStore上架流程也差不多走了一遍,从注册到完善资料以及提交审核(大致几周的时间)目前developer team反馈还是比较快的。

在这里希望增强现实能够快速普及开来,但这个过程难免有波折。

最后

如果你是CG爱好者,iOS开发或AR爱好者,愿能与你沟通交流

如果你是恐龙爱好者,不妨下载App体验

如果你身边有爱恐龙的孩子,可以当做礼物送给它,或许他会喜欢。