現(xiàn)代VR頭顯需要大量的計算資源來實時渲染高分辨率的內(nèi)容。所以,優(yōu)先考慮效率變得至關(guān)重要,特別是對于一體機版本。系統(tǒng)消耗能量的一個重要源頭是顯示器,而調(diào)暗屏幕可以節(jié)省相當(dāng)多的能源。
但是,這可能會導(dǎo)致顯示內(nèi)容中可見細節(jié)和對比度的損失。在一項研究中,瑞士提契諾大學(xué)團隊提出了一種隨時間調(diào)節(jié)亮度的技術(shù),同時最大限度地減少可見細節(jié)的潛在損失,并避免明顯的時間不穩(wěn)定性。
概括來說,給定一個預(yù)定的功率預(yù)算和視頻序列,可以通過亮度圖像的子帶分解來測量對比度損失,并離線優(yōu)化每幀的亮度水平,以確保均勻的時間對比度損失。
功耗是硬件設(shè)計的一個基本軸,特別是對于便攜式設(shè)備。電池壽命和計算能力形成了一個謹慎的平衡,有效利用電源可以直接有助于增加計算能力預(yù)算,以實現(xiàn)更逼真和交互式的應(yīng)用。
在VR設(shè)備中,調(diào)暗屏幕是一種常見的節(jié)能方法,但它需要在功耗和圖像質(zhì)量之間進行權(quán)衡。分析表明,對于節(jié)能目標(biāo)為30%的OLED架構(gòu),均勻調(diào)光在感知影響方面排名第二。另外,當(dāng)節(jié)能目標(biāo)超過60%時,均勻調(diào)光成為保持視覺質(zhì)量的最有效方法。
對于常見的LCD,均勻調(diào)光是唯一能夠在不造成顯著感知質(zhì)量損失的情況下將功耗降低50%的方法。所以,改進全局調(diào)光技術(shù)是在各種架構(gòu)中推進節(jié)能顯示設(shè)計的前景途徑。然而,對亮度水平的實質(zhì)性修正可能會降低內(nèi)容的可見度和亮度對比度。
在一項研究中,瑞士提契諾大學(xué)團隊提出了一種動態(tài)調(diào)節(jié)屏幕亮度以降低顯示功耗的新技術(shù)。所述方法是一個基于Low Level人類視覺模型的優(yōu)化問題,考慮感知亮度對比度。優(yōu)化過程旨在實現(xiàn)三個目標(biāo)之間的平衡。
首先,它旨在將功耗維持在指定的輸入水平。其次,它尋求在整個序列中確保一致的亮度對比度損失。最后,它保證任何隨時間變化的亮度不會判斷成偽影,比如可見的閃爍。
團隊專門為虛擬現(xiàn)實顯示器設(shè)計了解決方案,并利用這樣一個事實:沉浸在虛擬環(huán)境中的用戶無法訪問現(xiàn)實世界的刺激,對全局亮度變化的敏感度較低。團隊通過主觀的人類實驗徹底驗證了所述技術(shù),并在實際硬件測量了它的功耗節(jié)省。
他們的目標(biāo)是通過根據(jù)顯示的內(nèi)容智能地調(diào)暗屏幕,保持可見的對比度,從而實現(xiàn)顯示器的特定平均功率預(yù)算。由于這種時間亮度調(diào)制或會導(dǎo)致可見的時間偽影,所以限制調(diào)制速率以保持平滑。
所述方法通過分析使用多波段頻率分解建模的感知亮度對比度來量化可見對比度的損失。除了量化對比度損失的大小外,團隊同時識別由于亮度降低而導(dǎo)致細節(jié)不可見的圖像區(qū)域。然后,使用逐幀預(yù)測來優(yōu)化整個視頻序列離線的亮度調(diào)制。
實驗證明,與在序列持續(xù)時間內(nèi)均勻降低亮度的基線解決方案相比,所提出方法不僅提高了感知質(zhì)量,而且可以提高任務(wù)性能。除了離線優(yōu)化之外,研究人員同時提出了一個簡單的在線解決方案,并實現(xiàn)了相同的目標(biāo)。
團隊指出,方法的有效性取決于內(nèi)容。亮度和細節(jié)變化較小的序列獲益較少。對方法的一個有趣的擴展將涉及使用序列中重要區(qū)域的附加信息來指導(dǎo)優(yōu)化。這將使在特定幀中優(yōu)先考慮對比度保存,同時在沒有關(guān)鍵內(nèi)容的幀中實現(xiàn)更積極的調(diào)光。
另外,實驗使用了一個基于均勻背光的LCD面板的功耗模型。然而,這個模型并不適用于所有的顯示技術(shù)。不過,所提出方法依然可以跨各種技術(shù)使用。但是,應(yīng)該調(diào)整功耗模型,并且確切的節(jié)省量將根據(jù)具體技術(shù)而有所不同!
未來研究的一個有趣方向是擴展方法并利用顯示器的局部調(diào)光能力。另一個令人興奮的未來研究領(lǐng)域是探索跳眼抑制。
相關(guān)論文:Temporal Brightness Management for Immersive Content
https://paper.nweon.com/16336
總的來說,新興的VR技術(shù)對圖像質(zhì)量和性能的要求越來越高,所以電源效率是一個重大挑戰(zhàn)。團隊主要介紹了一種用于管理圖像亮度隨時間變化的新技術(shù),以實現(xiàn)所需的功率預(yù)算,同時保持均勻的時間對比度損失。
研究人員提高了細節(jié)可見性和可感知的質(zhì)量,并且不引入可感知的偽影。另外,他們通過各種感知實驗廣泛驗證了所提出方法,并通過自定義硬件代理證實了節(jié)能聲明。