屏下前攝效果不佳?微軟利用神經網絡找到新解決方案
在推進全面屏進程中,打孔前攝已經是較為成熟的商用解決方案,不過即將會被屏下前攝所取代。屏下前攝是指攝像頭位於透明的OLED面板下方,在不活動的時候這個屏幕仍然可以作為一個正常的顯示屏工作,在拍攝的時候能夠讓光線透過到達前攝傳感器。
屏下前攝存在非常多的優勢,但現有技術尚不足以使其商業化,其中一個尚未解決的問題就是由於屏幕像素結構的衍射,會模糊圖像,降低對比度,降低可用的光照度,甚至完全遮擋一些圖像內容。
幸運的是,這種影響是以可預測的方式發生的,而且由於像素結構決定了一般只在水平方向上發生。為此微軟的研究部門經過不懈的研究努力,終於找到了補償T- OLED屏幕拍攝時圖像模糊的影響。
研究人員使用了一種U-Net 卷積神經網絡結構,既提高了信噪比,又消除了圖像的模糊。該團隊能夠實現恢復的圖像與直接拍攝的圖像幾乎沒有區別。以下是處理效果前後對比
直接用相機拍攝的效果
在T-OLED 屏幕下方拍攝的效果
使用人工智能算法矯正的效果
讓人工智能參與到圖片捕捉中,還可以使用其他有趣的技術,比如模糊或替換背景以及其他視頻操作技術,從而實現更好更自然的視頻通話。微軟似乎正在開發這項工作主要是為了在視頻會議設置中的大屏幕中使用,但我相信它同樣適用於你的下一款旗艦智能手機。