你是否曾渴望成為畫中人？或者是控制畫中物？增強現(xiàn)實（AR）作為新一代人機交互平臺，或許可以幫你實現(xiàn)這一愿望。

近日，卡爾加里大學(xué)、Adobe 研究中心和科羅拉多大學(xué)博爾德分校的研究人員創(chuàng)建了一個增強現(xiàn)實（AR）界面 RealitySketch，該界面可用于繪制交互式圖形和可視化、可響應(yīng)的草圖。

相關(guān)研究以 “RealitySketch： Embedding Responsive Graphics and Visualizations in AR through Dynamic Sketching” 為題，發(fā)表在預(yù)印本平臺 arXiv 上。

該創(chuàng)新成果還在 ACM 用戶界面軟件和技術(shù)研討會（ACM Symposium on User Interface Software and Technology， UIST’20）上，獲得了最佳論文榮譽獎（Best Paper Honorable Mention）和最佳演示榮譽獎（Best Demo Honorable Mention）。

研究初衷：向?qū)W生解釋物理現(xiàn)象

近年來，交互式動態(tài)草圖一直是人機交互研究領(lǐng)域的核心主題之一，它通過對用戶進行交互式響應(yīng)，使人們能夠通過一個動態(tài)的視覺媒介進行思考和交流。

盡管目前市場上基于 AR 的草繪界面不計其數(shù)，但迄今為止開發(fā)的大多數(shù)解決方案都專注于研究如何將靜態(tài)圖形嵌入到現(xiàn)實世界中。例如 Pronto、SybiosisSketch 和 PintAR，以及 Google 的 Just a Line 或 DoodleLens 等商業(yè)平臺。

如今，該研究團隊開發(fā)出了更加豐富的動態(tài)素描技術(shù)詞匯，可以動態(tài)地實時創(chuàng)建交互式的動畫內(nèi)容。RealitySketch 平臺不僅允許用戶創(chuàng)建靜態(tài)草圖，還可以嵌入動態(tài)圖形和交互式圖形，這些圖形可以與用戶周圍的真實對象進行綁定，并對用戶的動作做出反應(yīng)。

圖 ｜ RealitySketch 可以使用戶通過實時草圖繪制實現(xiàn)鐘擺運動等物理現(xiàn)象的可視化

想象一下，當(dāng)我們在鐘擺上畫一條線，這條線隨著鐘擺的擺動而移動，這種交互式操作將鐘擺的運動進行可視化處理。就如上圖中右側(cè)曲線圖，形象地將鐘擺下方的位置進行了實時的繪制，這種抽象與現(xiàn)實的完美結(jié)合，幫助人們更好地理解物理現(xiàn)象。

該研究的作者之一 Ryo Suzuki 表示：“我們的項目初衷很簡單，就是通過 AR 交互式草圖繪制，使用戶能夠?qū)�現(xiàn)實世界進行可視化描繪。而這個想法最初來源于我們對物理課堂教育的觀察，在物理課堂中，老師指導(dǎo)的實驗課通常是物理學(xué)習(xí)的一個組成部分。”

向?qū)W生解釋物理現(xiàn)象有時是相當(dāng)具有挑戰(zhàn)性的，因為要充分理解這些物理現(xiàn)象，需要學(xué)生們想象這些現(xiàn)象是如何發(fā)生的，以及它們是什么樣子的，而不是僅僅學(xué)習(xí)與之相關(guān)的理論知識。

而由 Suzuki 及其研究團隊共同創(chuàng)建的 AR 平臺 RealitySketch，允許用戶制作動態(tài)和響應(yīng)式的圖形，這些圖形可以在黑板、墻壁或現(xiàn)實世界中的其他物體上進行可視化展現(xiàn)。

該平臺為學(xué)生們的物理學(xué)習(xí)提供了一個全新的窗口，可以幫助物理老師以動感十足的方式，讓學(xué)生直接觀察運動中的物理現(xiàn)象，從而可以幫助學(xué)生對課程所涵蓋的主題有更深的理解。