AR-VR在如何改變科學家們的生命科學、自然科學研究
原標題:AR-VR在如何改變科學家們的生命科學、自然科學研究
虛擬現實和增強現實工具允許研究人員以前所未有的方式瀏覽和分享數據
(映維網 2018年05月14日)虛擬現實和增強現實工具允許研究人員以前所未有的方式瀏覽和分享數據。但截至目前為止,它們主要是作為早期採用者的工具集,尚未實現大規模普及。
在我戴上VR頭顯後,外面的世界便消失於無。一個細胞出現在我的視野之中,當抬起脖子時,我可以從多個角度瀏覽它。我把頭伸進去探索它的內部結構。藉助運動控制器,我可以逐層分解細胞,用手腕輕輕挖掘,揭開埋在表面之下的細微結構。
Arivis是一家位於德國慕尼黑的生命科學軟體公司,他們開發了這種特殊的VR可視化工具,名為InViewR。
虛擬現實早已出現,但市場對這項技術的興趣要到2016年才開始迅速增長。增強現實則是一種相關的技術,其能夠通過透視頭顯或智能手機屏幕將數字對象疊加在周圍的環境中。
一些科學家認為VR和AR比傳統的平面屏幕更直觀,更適合用於瀏覽複雜的3D結構。其他人則通過基於智能手機的廉價頭顯來提高公眾對這項技術的理解。他們的人數相對較少:VR和AR仍然是一項利基工具。但一些研究人員表示,虛擬現實和增強現實提供了新的視角。
Adam Lacy-Hulbert是華盛頓州西雅圖貝納羅亞研究所(Benaroya Research Institute)的首席研究員。他對溶酶體特別感興趣 (一種幫助清理細胞內部的結構),但傳統顯微鏡的一些2D圖像令他感到困惑。Bulbert說道:「這看起來就像是細胞溶酶體的一部分已經移動進入細胞核,而這看起來完全沒有道理。」
貝納羅亞研究所開發的工具ConfocalVR則藉助VR來顯示共聚焦顯微鏡的圖像,這使得真正發生的事情「在幾秒鐘內顯現出現」。細胞核實際上是在溶酶體周圍變形和移動。
VR也為加利福尼亞大學的博士後研究員Wilian Cortopassi提供了幫助。ChimeraX是一種蛋白質和其他結構的分子可視化工具,它在2016年11月增加了對VR頭顯的支持。通過「行走」在氫鍵網狀組織的虛擬空間之中,Cortopassi明白了蛋白質中的某些突變體是如何阻礙靶向藥物。Cortopassi指出,當你對大量的原子進行可視化時,電腦顯示器會非常混亂;但在虛擬現實中,「你能夠以不同角度或距離瀏覽氫原子,並快速發現一些重要的相互作用。」
1. 虛擬現實
雖然存在價格便宜的選項,但大多數可視化工具只支持最昂貴的頭顯,如Facebook的Oculus Rift和HTC的Vive,因為它們可以追蹤用戶的頭部,並支持用戶在三維空間中自由行走。研究人員和玩家有他們的偏好,但OculusRift和HTC Vive之間的差異很小。「我認為目前還沒有明確的贏家。」ChimeraX的開發者之一Tom Ferrin如是說道。他的實驗室位於加利福尼亞大學,專門從事分子可視化工具。
並非所有工具都與所有頭顯兼容。InViewR僅適用於Oculus Rift,而ChimeraX和ConfocalVR則支持兩者。Oculus Rift和HTC Vive都基於Windows操作系統,但Vive同時兼容MacOS X。
VR是計算密集型的設備,因為每隻眼睛都必須看到不同的圖像以產生3D效果,而且這些圖像必須快速進行刷新。在某些情況下,新顯卡可以提供足夠的計算能力,「但一般情況下,你可能需要購置一台新電腦」,Benaroya的信息學和研究技術主管,以及ConfocalVR的創造者之一Tom Skillman解釋道。Oculus Rift推薦使用VR認證電腦,價格從850美元到3100美元不等。他們同時建議至少8GB內存和一枚高端顯卡。
VR軟體本身也可能很昂貴。儘管ConfocalVR和ChimeraX對非營利機構是免費提供,但對商業公司而言則並非如此。ConfocalVR沒有提供價格信息,但ChimeraX可能需要支付高達20000美元的費用。
對於喜歡團隊協作的用戶而言,ConfocalVR的開發者在4月增加了支持4名用戶同時瀏覽和抓取同一VR空間中結構的選項。這可能意味著科學家們不必面對面地一起工作,而這有可能會降低通勤成本。ChimeraX和InViewR的開發者都希望在未來增加類似的協作功能。
2. 增強現實
與VR相比,用於AR頭顯的可視化軟體則相對落後。美國密蘇里堪薩斯城醫院Children』s Mercy的信息總監Mark Hoffman曾通過微軟HoloLens來瀏覽蛋白質和CT掃描。
他表示AR的用戶友好程度高於VR,因為用戶可以看到周圍的環境,所以不容易產生暈動症。Hoffman實際上曾在VR中遭遇過暈動症,而這並非是一種罕見的現象。他說:「在使用HoloLens期間,我從未感到任何的不適。」
但缺點是,HoloLens只能將對象投影至視場中心的一個相對狹窄的矩形區域。Hoffman指出:「這是取捨的一部分。AR並非完全的身臨其境,而是『理解的促成者』。你在平面屏幕中可能會忽略很多東西,但在AR中卻會變得更為清晰。」比如說蛋白質與蛋白質的相互作用。
Children』s Mercy的外科醫生正在探索手術前通過AR來瀏覽患者心臟的CT掃描。Hoffman採用循序漸進的方法來通過HoloLens瀏覽相關數據。通過將影像投影至空間的固定點,外科醫生可以探索具體的組織。Hoffman解釋說:「他們可以走進心臟的心室,他們可能會看到特定兒童的一條血管入口點沒有位於正確的位置。」HoloLens售價3000美元,而且必須要直接向微軟訂購。
3. 低成本的選擇
更廉價的頭顯可以幫助研究人員覆蓋更廣泛的受眾,比如說基於智能手機的三星Gear VR或售價15美元的谷歌Cardboard。
Juicebox VR是一款專門面向這種簡單設備的應用。美國休斯敦貝勒醫學院的遺傳學家Erez Aiden表示,這款工具可以把人類基因組的連接渲染成火星般的地貌。Juicebox VR的開發商正是Aiden的實驗室,他表示:「當人們與之交互時,他們真的能夠理解數據的樣子。」
生物學家同樣採用了Augment。這款應用通常是用於可視化傢具在房間中的樣子,而生物學家則利用該工具幫助同事和學生通過智能手機屏幕來瀏覽蛋白質的3D模型。
對於有興趣自行開發可視化工具的研究人員而言,Unity則是其中一個最為普遍的開發環境。利用Unity來幫助Juicebox VR運行在Mac Pro的Muhammad Saad Shamim指出,它運行在相對適中的硬體上。Hoffman指出,對於HoloLens來說,用戶不需要成為高級開發者才能導入3D對象。然而,他們需要熟悉Unity和微軟的Visual Studio編程環境。其他選項包括Unreal Engine,以及免費3D圖形工具OpenGL。使用OpenGL創建ChimeraX的Ferrin表示,OpenGL比Unity或Unreal需要更多的前期工作,因為開發者需要直接處理更多的編程細節,但回報是功能的限制更少。
儘管VR和AR工具已經在消費者文化中開始普及,但目前只有少數實驗室使用了該技術,而且還有多少人會效仿仍有待觀察。然而,許多倡導者預測VR和AR可能在未來五年內成為標準的實驗室工具。Skillman說,該技術以三維方式向我們大腦提供信息,而這本應是最自然的方式。他指出,在2D屏幕構建3D心理模型需要大量的智力工作,但「當你戴上頭顯時,所有這一切工作都會消失。」
※Steam 4月數據調查:VR月活用戶佔比大增,達歷史新高
※詳細測試,集成Vega顯卡AMD Ryzen 5 2400G能否支持VR體驗
TAG:映維網 |