乐鱼官网入口·设计师已经开始戴着Vision Pro上班了?
乐鱼登录客户端

公司新闻

News Update

乐鱼官网入口·设计师已经开始戴着Vision Pro上班了?

2024-09-19 06:09:23 来源:乐鱼·体育中国官方入口 作者:乐鱼登录客户端 47
分享到:

  “Mac将我们带入个人计算时代;iPhone将我们带入移动计算时代;Apple Vision Pro将带我们进入空间计算时代。” —— WWDC 2023

  Apple Vision Pro作为一款可能带来设计交互体验变革的创新产品,自从去年在发布会上正式问世,就已引起行业内各设计师的关注。飞猪设计师也很早就开始期待这款产品。

  在年初其正式发售后,我们便很快入手并体验了真机。戴了一星期的Vision Pro摸鱼上班 (bushi),提前感受了一把传说中的空间计算时代,本篇文章,我们从设计师角度为大家带来一些关于Vision Pro的探讨。

  让我们来简单了解一下Apple Vision Pro(以下简称VP),我们很难局限地定义它为VR或AR设备,它在官方的定义中是可穿戴式的空间计算设备。

  空间计算,融合XR、3D图形、计算机视觉、物联网传感和体感输入等多元技术,并借助AIGC生成内容,实现虚拟与现实世界的高度一体化。用户通过可穿戴设备如头显、眼镜等接入空间操作系统,能够直接与数字环境互动,以沉浸式体验实现如同亲临其境的在场效果。“用户佩戴 Apple Vision Pro 时会进入无边际的 3D 空间,在这里他们可以与你的 App 或游戏交互,同时与周围环境保持联系。”

  Vison OS设计系统将自己定义为Spatial Design空间设计。我们体验了当前大部分Apple Vision Pro的应用,发现许多应用只是单纯从iPhone等平台做了迁移,本身的设计并没有去发挥设备的亮点,并不算是重新进行了“空间设计”。甚至某些应用的业务场景本身,对用户来说也不需要戴着这么重的设备去使用。

  而有那么一些亮点设计应用案例,则是在原先的App框架上又针对Vision Pro的空间画布、沉浸式浏览等亮点功能进行了设计升级,给我们带来了比较新奇的体验。本篇文章,我们将会结合一些设计师可以关注的VP亮点功能,为大家分享这些设计案例。

  VP通过你的视线进行追踪选择对象,视线追踪非常灵敏,基本感受不到什么延迟,使用手指捏拢进行点击、拖拽等交互,手不需要时刻高高抬起,较为轻松。

  「AirDraw」空间绘画App,巧妙地使用了左手追踪来放置绘画的工具栏,工具栏随着左手的空间移动而相应变化,右手捏合进行绘画。体验这款应用的时候,我们立刻就联想到到现实世界绘画时,左手拿画板右手拿画笔的真实体验。应用商店里还有一款类似的应用叫「Spatial Paint」,也有一些不带压感的涂鸦画画应用。

  这些绘画应用,当前都没有达到可以作为专业的三维或绘画生产力工具的程度,毕竟对于绘画来说,只靠当前的交互方式是捕捉不到压感变化的。

  三维生产工具则工具栏非常复杂,我们以往在电脑上操作时都需要键盘快捷键+鼠标组合,难以想象这里使用眼睛+双指会是多么困难。不过VP可以拿来做建模模型效果实时预览,在下文会再提到。

  「JigSpace」科普类产品展示App,其中有大量可拆分的三维模型,包括一些工程模型、医学解剖模型等,它巧用了长捏合拆分模型、捏合拖拽拆分模型、双手捏和拉拽缩放等方式与模型产生各种交互,配合我们佩戴者观看视角的改变,能方便地了解一个物件内部的机械结构和运行原理。

  打字输入的场景中,我们发现直接用手指触碰按钮会比较高效。若用目视+手指捏拢方式输入则会非常麻烦。当然,你也可以选择直接用语音输入。我们体验下来,进行大段信息输入的办公体验并不是很好。

  我们也了解了VP上一些游戏类App。我们所期待的VR游戏大作是很震撼的,但是目前VP上主要是简单的交互的休闲小游戏,毕竟所支持的手势较简单,如果不搭配手柄等设备,很难进行稍微复杂一些的操控。

  如果发展大型游戏,以现在VP的渲染技术需要承载许多复杂的计算,可能比较难发挥游戏引擎本身的优势。不过总体而言,我们还是非常期待游戏领域应用前景的。

  不论是投射在真实环境中的磨砂玻璃风格UI组件,还是结合真实环境查看的AR模型,呈现出来的虚拟与现实都融合得非常自然。Vision OS体系的窗口都带了非常细腻的物理磨砂玻璃质感,并会模拟投影在你的真实环境中,还带有前景遮挡。

  另外,在VP里,一些AR三维模型甚至会与你周围的环境光线发生交互,模拟真实的光影效果。一般大部分AR三维模型是把高光反射、阴影等所有的通道一起烘焙在物体表面贴图上,如何改变视角其表面颜色都不会改变,因此会比较“假”一些。

  在VP里体验「JigSpace」App的AR赛车时,我们就能比较明显看出光影的动态变化。我们体验下来在当前VP的AR效果里,这个赛车与环境的融合度是最好的。可以看到图片中表面高光在随着我们视角的变化而改变。

  在VP里使用「Polycam」模型预览App查看AR三维模型时,也能看出真实环境中的平面能接收到虚拟物体带来的阴影,使其与环境更加融合。

  真实环境部分的图像,实际上则是由VP的摄像头传送到显示屏上的,虽然基本没有什么延迟,但会存在一些噪点,带来一些不线m内的近处基本无法看清,因此戴着VP时无法看手机。或许下一代产品会针对此点进行改善,但整体来说,它当前的虚拟现实融合效果已经相当不错。

  我们将不再局限于“一块有限的平面的屏幕,或一个局限于真实物理世界的某个物体”来承载自己的设计。VP提供了无限空间,方便我们在其中查看平面、3D、空间等各类内容,为界面设计带来了无限可能性。有许多应用已经开始发挥创意,设计出有趣的界面和交互。

  「Art Authority Museum」艺术作品欣赏App,设计了空间画布中一种水平环绕式的窗口分布样式。由于展示空间是在无限的立体空间中的,在VP中去拖拽窗口时本身会始终朝向观者,而这种大量图片信息内容一字排开直接设计成环绕式,观看体验更好。

  「Spatial Noise: White Sounds」一款白噪音App,可以通过在空间画布中拖拽白噪音音轨窗口的分布位置,实时影响我们耳朵里所听到的空间音频,如把A窗口慢慢移到左边,我们就会听到这个A声音慢慢变成从左边传来。窗口分布以观者为中心,进行了球状展开,遍布在空间中,这种设计与App本身的体验内容也相关联,十分巧妙。

  「Seasons」天气类App,除了窗口面片外,VP空间画布的另一个亮点是3D元素的使用。这款App全面利用了空间画布,设计了下雨、飘雪、落叶等天气和季节相关的三维粒子系统,实际佩戴体验时,由于VP对3d物体是有立体显示效果的,这些雪花和雨点粒子仿佛真的在你眼前落下。抛开是否有必要特地用Vision Pro去看天气预报不论,与iPhone上原生的天气应用仅在背景上去做一些天气氛围相比,这种在空间里做文章所带来的沉浸感完全是不一样的。

  体育类App,当前我们体验了「Red Bull TV」、「PGA Tour」等应用,它们都会展示赛事的场地3D模型,像沙盘一样放置在观者眼前,让观众多了一个方式去了解这项运动。这里我们放的图例是油管上比较火的f1比赛demo,其中呈现的形态会更加接近我们认为理想的形式,场地模型与赛况有着实时关联,而不单纯是一个三维模型展示。不过这个demo当前还没有真正上架到AppStore。据说NBA赛事也会搬到VP上,相信未来还会有大量精彩的体育类应用被开发出来。

  「iDaily World」新闻资讯类App,界面也巧用了克制而不喧宾夺主的3d元素——地球,与环球类新闻的业务内容相呼应。在我们查看不同的新闻时,界面左上角的小地球会转到新闻发生的地区,我们也可以手动旋转模型查看不同新闻。

  「Space Vision」天文科普类App,也使用了星球元素,它在窗口里面设置了3D物体,太阳系的各大行星和卫星逐一被展示出来。在窗口中的星球3D模型也可以被拽到面前进行交互。

  「StockX」购物类应用,在一些手机购物类应用中,我们已经体验过与商品模型的交互,而在VP里,我们还可以在真实环境中与模型交互。如,把它放置在眼前查看细节、摆放在家中查看效果(很适合家居类商品),也有一些AR试穿鞋子的dem。


乐鱼官网入口 上一篇:华南理工基于可穿戴式多模态人机接口的机械臂运动控制 下一篇:收看汤尤杯时你注意到这个细节了吗?上海原创国内首个