2018年08月27日，iPone在2007年開啟了個人計算機的新時代。這種設(shè)備在與先前的設(shè)備(臺式電腦，筆記本電腦和電視等等)有著一系列的不同之處。移動設(shè)備專注于個人用戶，搭載攝像頭，并且通過一個高度集中的應(yīng)用商店來分發(fā)應(yīng)用程序。

　　1. 第一代與第二代

　　二維顯示器是主要的輸出技術(shù)。1英寸的智能手表，4英寸的智能手機，10英寸的平板電腦，13英寸的筆記本電腦，27英寸的臺式電腦，55英寸的電視，以及80英寸的數(shù)字白板在顯示方面的功能上幾乎完全一樣：輸出高密度和多色彩的動畫圖形。不同的屏幕尺寸并沒有創(chuàng)建出不同的計算機時代。

　　盡管它們都是基于2D屏幕，但在輸入信息上卻存在區(qū)別。要控制電腦，你通常需要使用鍵盤和鼠標(biāo);要控制電視，你需要的是遙控器;要控制游戲主機，你使用的是游戲手柄;對于所述設(shè)備，你所觸碰的控制元件通常與屏幕上的數(shù)字內(nèi)容彼此分離。對此，我們將這種控制機制稱之為“間接操縱”。

　　與之對比，智能手機和平板電腦一般把觸控屏作為它們的主要輸入技術(shù)。觸控屏能夠帶來“直接操縱”：你感覺自己仿佛正在用手指觸碰數(shù)字內(nèi)容。用戶與數(shù)字內(nèi)容之間不存在控制器。

　　與間接操縱相比，直接操縱有兩個優(yōu)勢。首先，這更為強大。你可以在一臺設(shè)備上用直接操縱模擬間接操縱，但反過來卻無法實現(xiàn)。對于非觸控屏設(shè)備而言，你無法通過軟件來實現(xiàn)手指書寫文本的操作。然而，你可以在非觸控屏上運行為觸控屏設(shè)計的應(yīng)用程序，并且用鼠標(biāo)和鍵盤進行操作。其次，直接操縱比間接操縱感覺更自然。

　　2. 第三代

　　我們指出今天計算機顯示器屬于2D范疇的原因是，我們需要探索3D顯示器對個人計算機的意義。

　　“早期采用者質(zhì)量”的虛擬顯示和增強現(xiàn)實設(shè)備在過去數(shù)年間已經(jīng)陸續(xù)上市。它們用沉重，尷尬，昂貴，同時缺乏足夠的游戲和應(yīng)用來為消費者提供下單購買的理由。但至少從我的經(jīng)驗出發(fā)，所有剛戴上HoloLens或VR頭顯的用戶都會面帶微笑。3D顯示器在特定方面比2D顯示器更加自然和更加神奇。一旦這種設(shè)備的形狀能夠比擬普通眼鏡和太陽鏡，映維網(wǎng)相信它們將能像今天的筆記本電腦和手機一樣實現(xiàn)廣泛普及。

　　今天的VR和AR設(shè)備都使用間接操縱。微軟HoloLens使用眼動追蹤和手勢輸入組合來復(fù)制光標(biāo)和鼠標(biāo)的交互模型。Oculus Rift，索尼PSVR，HTC Vive，谷歌Daydream View，三星Gear VR，以及各種Windows混合現(xiàn)實頭顯都依賴于運動控制器。

　　這種設(shè)備結(jié)合了3D顯示器和間接操縱，下面我們不妨根據(jù)上圖再為3D顯示設(shè)備添加新的一行，從而創(chuàng)建一個四方矩陣。

　　除了頭顯和眼鏡之外，還有更多方法可以展示3D內(nèi)容。“魔法窗口”能夠允許你感知3D內(nèi)容，這就像你正在瀏覽搭載頭部追蹤傳感器的2D窗口一樣。借助更大的顯示屏，魔法窗口可以變成“魔法墻壁”。隨著技術(shù)的不斷進步，也許未來有一天將會出現(xiàn)充滿全息圖的“魔法盒子”，這樣我們無需穿戴任何眼鏡或頭顯都能感知3D數(shù)字內(nèi)容。

　　正如直接操縱比間接操縱更強大一樣，3D顯示器同樣比2D顯示器更加強大，因為它們可以模擬2D內(nèi)容。盡管你可以“在3D中模擬2D”，但你卻無法“在2D中模擬3D”。在2D顯示器上，你最多只能實現(xiàn)3D世界的平面投影。

　　這種額外的力量(基本上是計算機輸出的另一個維度)是第三代個人計算機感覺像是智能手機和平板電腦的一種升級的原因。但需要注意的是，這個額外的力量是以直接操縱作為代價。人們是否仍然因為直接操縱而繼續(xù)傾向于智能手機手機呢?我十分期待未來數(shù)年的發(fā)展情況。我認(rèn)為人們會花費更多的時間使用眼鏡+控制器的組合，因為人們投入至消費的時間(使用顯示器)比創(chuàng)造的時間(使用任意一種操縱方式)更多。

　　3. 第四代

　　假如我們結(jié)合直接操縱和3D顯示器呢，亦即一臺允許我們直接控制3D對象的設(shè)備?你將能直接控制所有的3D對象，而這正是人類以及其他所有動物與物質(zhì)世界相互作用的方式。

　　我們所討論的四種交互方法都存在于物理世界之中，但3D視覺+直接操縱是我們最經(jīng)常使用的方法。由于它能夠模擬其他三種方式，所以從這個意義上講它是最強大的方法。我們或許可以從另一個角度來看，其他三種控制方式只是第四種控制方式的特例。

　　使用具備3D視覺效果和直接控制方式的個人計算機將是如何一番感覺呢?想象一下你的周圍都是可以觸碰的全息圖，或者一張你可以就座的全息椅子;一堵你可以背靠的全息墻壁;或者是你可以行走的全息樓梯。

　　這怎么可能呢?想象一下，未來將出現(xiàn)可以向你身體施加任意作用力的魔術(shù)緊身衣，魔術(shù)手套和魔法鞋。這一切都將允許你觸摸虛擬對象。

　　然而，還有其他途徑可能會讓第四代個人計算機更快地到來。與純虛擬3D對象相比，我們?yōu)槭裁床皇褂猛ㄟ^數(shù)字信息來增強的真實的物理對象呢?其中這樣一個項目名為Dynamicland。在體驗中，所有一切都由攝像頭進行追蹤并由投影儀進行增強。物理對象和數(shù)字對象都是體驗的一部分。由于用戶是在3D空間中通過直接操縱來與對象進行交互，這相當(dāng)于第四代計算機。

　　4. 有趣的時代即將到來

　　對UI設(shè)計而言，未來數(shù)十年成為2D UI在70年代和80年代誕生以來最為令人興奮的時代，因為現(xiàn)在沒有人知道3D中行之有效的操作系統(tǒng)是什么，沒有人知道如何能夠像制作2D網(wǎng)站一樣簡單地制作交互式3D內(nèi)容，也沒有人知道一個由數(shù)字對象增強現(xiàn)實的物理世界到底是怎么一番光景。