影见设计概念介绍

简介:

我从网易影见项目成立的初期(2016年),就简单参与了影见的硬件设计工作。直到 2018 年开始全面接手影见从软件到硬件的全范围设计、管理工作,带领产品设计团队完成产品硬件、操作系统、开发者工具、互动游戏内容的设计研发。产品于 2020 年 6 月完成初次试量产,开始正式售卖。

在项目过程中,我也一直在思考以什么样的方式来介绍一个历时几年包含软硬件研发的复杂项目设计。最终决定以博客的形式大块面聊一聊影见背后所代表的设计理念和技术方向。

关于影见

打破“显示框”的交互方式

计算机在发明之初,人们是通过命令行方式与机器交互的,即输入命令后,计算机回复答案。这种方式学习门槛极高、且大部分情况下效率底下。直到1970年,由Alan Kay 和其所在的Xerox PARC 提出了“桌面比喻“(Desktop metaphor)理念,并推导出了图形界面(Graphic User Interface)式计算机交互方式。这种拟物的设计理念将电脑比喻为一张桌面,应用程序就是放在桌面上的各种工具,例如:文件夹、记事本、计算器等等,极大程度地降低了计算机使用门槛,为电脑像普通家庭普及提供了强大助力。时至今日,图形界面(GUI )依然是人和计算机互动的主流方式。

在信息高度发达的今天,手机和电脑已经成为我们与虚拟信息世界之间的重要连接触点。虽然 GUI 式交互在文字、图像处理等工作中被实验证明是更高效的交互方式,但生活中基于真实三维空间环境的问题在二维界面内往往难以准确呈现。而且世界不是平面的,为什么我们创造的虚拟世界要被困在一个方形显示框里?越来越高的近视率以及“低头族”等社会现象的也在让我们反思,是否可以打破手机、电脑的显示方框,以更佳自然有效地方式来进行信息互动?

Tangible Interaction

在这种打破“显示框”的思想下,很多新的互动方案被提出来了。Tangible Interaction 就是其中一种,它也是影见 AR 互动投影方案背后最重要的支撑理论。Tangible User Interface 最初由麻省理工多媒体实验室(MIT Media Lab)的Hiroshi Ishii 教授提出来,它指的是将信息附着在实际物体、空间和平面上,使得信息能够直接被感受、触摸、甚至操控。他形容 GUI 就像是隔着水面看水下的风景,如图1。而 TUI 中虚拟信息像冰山一样从水面下(虚拟世界)向水上(现实世界)冒出了一个尖,人们可以通过抓住这个尖来控制水下的虚拟世界,如图2。影见就很好地秉承了TUI 这种看得见、摸得着的设计理念。

我们在设计影见下互动内容的过程发现,有些场景下我们希望真实物体也可以随着信息的改变而变化。例如:在一个碰碰车游戏里,我们可以采用真实的碰碰车玩具,影见检测到碰撞以后,给碰撞汽车投影烟火等视觉效果和音效,但是并不能让玩具车在强烈碰撞后变形。这种实物随信息变化而变化的状态,其实就符合 Ishii 教授提出的 Radical Atoms 理念,即信息本身成为实体,人们可以之间与其互动,如图3。以这个概念举个例子,比如桌子感受到人要拿桌面上的物品,就自动把物品举起来。当然,我认为要达到这一阶段,还有很长的路要走。

Object Interaction

我觉得实物互动(Object Interaction)其实是 TUI 理念的一个延伸,对于使用者来说,对物体进行真实地抓握、拍打等等互动是除了视觉感受之外带来沉浸感的重要因数。而对于设计师来说,其难点在于怎么定义手与物体的多个状态。对于点击手势来说,基础状态是up 和 down,基于基础状态组合可以变化为单击、双击、长按、滑动等等。虽然手可以用成千上万中姿势拿一个物体,但基于影见桌面互动的特性,我们把影见实物互动的基础状态归纳为detected,press,hover,hold 四个状态,并期待以后可以往上层延展像 move,drage,push,rotate 等等状态。

Calm Technology

我们在设计影见的时候常常会说,我们希望影见不仅仅是一块放大的触控屏,这种想法正是打破“显示框”思考的延续。所以当我们了解到 Calm Technology 的时候,我们认为这个概念与我们的设计理念有很大重叠的部分,二者的核心思想都是“信息只出现在需要的地方”。 Calm Technology 是对信息爆炸时代的反思,我们每天都被各式各样的信息打扰,所有应用程序都是朝着占领用户越来越多使用时长的方向去设计的,随之引发的社会问题也越来越受到人们关注。Calm Technology 提供了一种新的产品设计思路,我们可以通过科技手段来减轻用户的信息负担,“技术应无缝地融入我们的生活,而不是让我们时时感到技术的战栗与恐惧;我们不会消失在电脑空间中,而是电脑将消失在我们的生活当中。在平静互动(calm interaction)中,人们不会一直遭受信息“轰炸”,而会因为互动而感到“安心”。

同样的,基于影见强大的感知能力,我们可以从使用场景出发对信息是否被需要做一定的预判,再将需要的信息精确投影到需要的位置,并形成与对应物体的依附、追随、躲避等等效果。

Projection Mapping

从投影本身出发,影见也利用了Projection Mapping 这中表现方式。Projection Mapping在国内被称为光雕投影,它指的是将画面通过投影贴合在立体物体的不同表面,并且针对每个倾斜/弯曲的面进行视觉矫正,从而达到整体呈现立体投影的效果。 Projection Mapping 是对实体物体/场景的视觉增强,被广泛运用在展示类项目中。

Augmented Reality

前面讲了投影对现实世界的增强效果,TUI 和 Object Interaction 等概念带来的强互动性,Calm Technology 所强调的科技人性化。而这些理念的背后都是打破“显示框”的想法在支持,而这本身也是增强现实技术在解决的问题。所以我们说“投影+强互动”的影见是一款 AR 互动投影仪。

back

Mo Zhang
Phone: +86 134-2966-1756
Email: mo.zhang.43@gmail.com
Skype: mo.zhang.43