兩會(huì )記者熱衷的全景視頻會(huì )模糊？

　　這幾天，VR群頗為熱鬧，時(shí)不時(shí)會(huì )有小伙伴出來(lái)刷屏表示，兩會(huì )記者采用360度全景相機進(jìn)行新聞報道，甚至還有人開(kāi)始布道“兩會(huì )首次采用VR技術(shù)，開(kāi)啟國內VR元年”云云。雖然大部分是2D全景的偽VR視頻，但記者對這些還是饒有興趣。

　　在網(wǎng)上搜索之后，我們可以發(fā)現采用全景視頻進(jìn)行兩會(huì )報道的媒體有五家，分別是新華網(wǎng)、法制晚報、經(jīng)濟日報、光明網(wǎng)以及中新網(wǎng)(不排除遺漏)。這些視頻主要通過(guò)三種途徑進(jìn)行傳播，一種是視頻平臺比如優(yōu)酷、樂(lè )視視頻APP、愛(ài)奇藝、得圖、UtoVR等，第二種是通過(guò)自己的媒體平臺，第三種是通過(guò)H5頁(yè)面。

　　根據相關(guān)的報道，上述的兩會(huì )記者主要采用兩種全景視頻拍攝方案，第一種是兩目一體機比如Insta360、完美幻境Eyesir，第二種是以組合GoPro的多目方案。(還有其他品牌這里就不贅述。)值得一提的是，這些全景拍攝方案的拼接技術(shù)均來(lái)自其方案本身。比如Eyesir通過(guò)硬件實(shí)時(shí)拼接，而新華社采用的是萊瑞特七目全景相機配套的拼接技術(shù)?；旧隙际?ldquo;傻瓜式”操作實(shí)現全景拼接。

　　而這些關(guān)于兩會(huì )的全景視頻都有一個(gè)共同的特點(diǎn)，用戶(hù)可以通過(guò)鼠標、手機劃屏或者傳感器等轉換視角，看到基于全景相機這一點(diǎn)的360度全景畫(huà)面。相比于傳統的展示模式，這種全景確實(shí)讓人眼前一亮。正如網(wǎng)上所言，

　　“全景展示兩會(huì )的方式，讓讀者從被動(dòng)接受新聞場(chǎng)景的展示變成了主動(dòng)選擇，并擁有了身臨其境的代入感，讓不是人大代表的我過(guò)了把官癮～”

　　不過(guò)，記者也發(fā)現一個(gè)比較嚴重的問(wèn)題：視頻的畫(huà)質(zhì)普遍差，即使通過(guò)優(yōu)酷會(huì )員選擇最高的1080P，其觀(guān)看的效果也不好。事實(shí)上，兩會(huì )所采用的全景相機方案都能夠支持4K視頻的輸出。為什么會(huì )出現畫(huà)質(zhì)普遍差情況呢?對于硬件這種難以統一討論的原因，本文暫時(shí)忽略，只討論基于視覺(jué)效果的因素。

　　有不少人告訴記者，造成全景視頻模糊的主要原因在于優(yōu)酷等平臺的播放器以及帶寬水平。對于帶寬問(wèn)題，Insta360 CEO劉靖康是這樣解釋的：

　　“1080P對于全景視頻來(lái)講是不夠的，會(huì )很模糊。到4K會(huì )比較清楚，但是目前大部分網(wǎng)站的帶寬水平不足以分發(fā)4K的視頻。目前，一般(客戶(hù)端)視頻網(wǎng)站承受的起的就是2~3M，再大的話(huà)他們成本受不了，用戶(hù)也不一定看得了。但是對于好一點(diǎn)的全景視頻來(lái)講，碼率起碼到6M，一般4K的都10幾M。”

　　除了貌似難以解決的帶寬問(wèn)題，不少團隊也向記者抱怨優(yōu)酷等平臺的播放器沒(méi)有進(jìn)行優(yōu)化，導致對全景視頻的支持力度不夠。有人還說(shuō)，同一個(gè)視頻在YouTube和優(yōu)酷上的區別很大。對此，有兩種看法。一種來(lái)自得圖CTO孫其瑞的“播放器后端”觀(guān)點(diǎn)：這是由于優(yōu)酷視頻壓縮、傳輸及其運營(yíng)成本的策略造成的。另一種說(shuō)法來(lái)自業(yè)內一名知情人士，他表示，

　　“目前，優(yōu)酷是在CPU上做計算。當視頻解碼后，圖片會(huì )送到CPU，CPU再送回GPU貼圖。因為在CPU和GPU之間傳送是有效率問(wèn)題的，所以會(huì )先把圖片壓縮再傳輸。但最好的方式應該是，視頻解碼出來(lái)之后直接丟到GPU。如果是CPU的話(huà)，2048x1024對大多數電腦來(lái)講就非?？?，而且邊長(cháng)只能是2的指數，所以它會(huì )把2048x1024先壓縮到1024x512，差了非常遠。但如果直接在GPU里操作，就沒(méi)有邊長(cháng)是2的指數這個(gè)限制了。”

　　盡管如此，記者仍覺(jué)得以上這兩個(gè)原因還不足夠說(shuō)明問(wèn)題。在記者瀏覽視頻的時(shí)候，也會(huì )出現如上圖的情況：拼接錯亂處出現局部模糊影響畫(huà)面。對此，計算機視覺(jué)解決方案商進(jìn)化動(dòng)力表示：

　　“通常出現這種情況是采用后制拼接軟件的問(wèn)題，并非是圖像信號的失真造成模糊。主要因為在標準的特征拼接算法流程中，圖像會(huì )做幾次的高斯模糊卷積，從里面選取高頻信號，進(jìn)而消除拼接縫處的重影現象。但是因為相機相對位置的外參估計不準確，造成圖像拼接模糊。”

　　事實(shí)上，拼接處理不好，最終也會(huì )影響最后的畫(huà)面效果。具體來(lái)說(shuō)，拼接包括外參標定、內參標定、顏色矯正、去模糊、最終優(yōu)化這5個(gè)過(guò)程。“每個(gè)過(guò)程的參數選擇都很多，方法也很多”，而這些參數都會(huì )影響到最后的效果。

　　對于記者提出的另一個(gè)問(wèn)題：廣角鏡頭的畸變問(wèn)題對畫(huà)質(zhì)的影響。進(jìn)化動(dòng)力表示，兩個(gè)鏡頭的全景相機的畸變問(wèn)題沒(méi)什么辦法，因為魚(yú)眼鏡頭光學(xué)特性的原因，鏡頭邊緣處通常會(huì )有較為嚴重的圖像信號失真與畸變。不過(guò)，還有一個(gè)可能，就是用OpenGL或者其他引擎投影到球面上的時(shí)候，即顯示全景視頻的時(shí)候，參數選擇的問(wèn)題。“在進(jìn)行顯示投影的時(shí)候修改投影參數，雖然能夠修復邊緣處的畸變問(wèn)題，但是丟失的圖像信號無(wú)法恢復，所以仍然會(huì )較為模糊”，對方說(shuō)。

　　自此，我們可以總結播放器和帶寬水平是造成目前全景視頻模糊不清的主要原因。與此同時(shí)，還有更多原因造成這一效果，這不僅僅是上文討論到的拼接和畸變，還有硬件瓶頸，比如大多數拍攝燈光的畫(huà)面都出現暈光效應;還有操作不當引起的，比如曝光不均衡導致拼接后的天空出現“一塊白一塊藍”的畫(huà)面等。

　　不過(guò)，這些問(wèn)題最終會(huì )得到解決，而且，這之后也不僅僅是清晰的2D全景，而是立體全景+更多互動(dòng)模式。