如果你曾想释放自己内心的鲍勃-罗斯(Bob Ross),也许很快你就能在苹果视觉专业版(Apple Vision Pro)中制造自己的快乐事故了。
最近外媒报道了苹果正在为 AR 和 VR 测试 Apple Pencil 的传言,但看起来该公司希望最终能完全抛弃触控笔。
苹果公司提出的技术基于两项专利,允许用户在增强现实技术中绘画。用户可以在虚拟画布上作画。不过,这项技术也可以在现实世界中进行艺术创作,将艺术品叠加在实际元素之上。
第一项专利申请 "用于头戴式设备的基于触控笔的输入系统" 所描述的正是传言中所说的内容: 苹果正在研究使用触控笔与虚拟世界进行交互。
虽然 Apple Pencil 似乎是输入设备的自然选择,但该专利描述了一种带有光发射器(可能是红外线)的新设备,可以让头显追踪设备的位置和方向。
第二项专利 "在计算机生成的现实环境中实现绘图的技术" 则更进一步。
这幅图展示了苹果公司追踪用户手部的计划。捏住你的手指,就像拿着画笔一样,一支画笔就会叠加在你的手上。切换工具后,Apple Vision Pro 就会改变你所持工具的显示效果。
虽然应用中没有提及,但为不同媒体添加手势是很容易的。你也许可以用手势虚拟喷漆,比如拿着罐子按下按钮,或者伸出手指用手指画颜料。
苹果希望通过独特的选色手势,虚拟模拟艺术家的工作流程。有了这项技术,你可以翻转一只手,将虚拟画笔 "蘸" 进虚拟颜料中来挑选和混合颜色。这种体验将模仿艺术家们一手拿着颜料盘,一手拿着画笔的场景。
在三维空间中绘画并非独一无二。任何拥有 Quest 这样耳机的人都可以使用 Tilt Brush 或其他艺术程序来创作虚拟艺术作品。
不过,这些程序使用的是控制器,充其量只能说是笨拙。按下按钮并不是一种自然的绘画方式,而且控制器会影响体验。
除了虚拟绘画外,苹果公司的专利还表明,音频反馈可以让用户听到纸上的笔触或铅笔线条。这样的沉浸式体验可以改变 AR/VR 中的艺术创作。
音频反馈还可用于虚拟艺术课程。戴上耳机,听着舒缓的音乐,按照绘画老师的提示进行创作。结果就是在耳机里上一堂艺术课。
我们可以想象,这将与苹果公司的其他 AR/VR 专利结合在一起,即使不在同一空间,也能让多个用户查看相同的虚拟对象并与之互动。例如,你可以与一位真正的教师一起上课,并与他们一起在同一块虚拟画布上作画。
与所有专利申请一样,我们不能保证这些技术会很快出现,甚至永远不会出现。但结合苹果公司已经在 Apple Vision Pro 中测试 Apple Pencil 的传言,可以肯定地说,其中一些技术很快就会问世,也许最快会在 2024 年的 WWDC 上问世。
苹果使用手写笔输入的专利归功于 Killian Moore,他是苹果申请的多项 AR/VR 专利的主要申请人。在 AR/VR 中绘图的专利是由苹果公司 visionOS 高级经理 Edwin Iskander 创造的。