然而,由于質量不可控、帶寬受限、帶寬成本高,在各應用場景中,視頻質量問題一直飽受用戶詬病。隨著算法優化、硬件升級以及深度學習的不斷深入為這一切帶來了新的解決方法,AI——節省帶寬提升畫質為解決視頻行業的痛點帶來新突破。
實際中,企業從成本角度考慮,往往會從降低視頻碼率、優化內容分發策略以及控制播放策略這三個層面入手降低成本,而視頻碼率的降低會影響用戶對畫質的主觀體驗。國內視頻服務商1080P視頻碼率普遍控制在2-3Mbps,720P視頻碼率在1-1.5Mbps,480P視頻碼率在0.4-0.8Mbps,這勢必會帶來視頻模糊問題,導致用戶體驗差。
帶寬節省達40% 集智高清產品表現出眾
針對于視頻成本和畫質內容難以同時兼得的問題,金山云專門推出了一款權衡兩者的視頻服務產品——集智高清。
集智高清基于AI技術與傳統圖像處理技術的視頻解決方案,集合多種視覺AI與編碼技術,通過深度學習與神經網絡對視頻畫面內容進行感知,優化主觀體驗和智能調節編碼,追求最佳的人眼視覺感受。可在主觀體驗優于源片的基礎上,達到節省帶寬20%-40%。
目前金山云的集智高清產品處于行業領先水平,并在絕大部分視頻場景如秀場、電影、監控、教育、綜藝、體育等得到應用。由于低清視頻轉碼提升很明顯、增益最大,集智高清產品在UGC短視頻場景表現也更為突出,UGC短視頻也因此成為使用集智高清服務數量最多的用戶場景。
在實際測試結果中,集智高清產品表現出眾。
首先因為碼率的降低,集智高清在點播和直播QoS上提升效果明顯,包括首幀、卡頓率、卡頓時間等;其次集智高清同樣在主觀上存在增益:一方面塊級智能決策可以很好地避免塊效應,減少低清視頻比率、降低產生用戶反感的塊效應的可能性,另一方面利用AI的修復能力能夠有效避免第一次編碼可能造成的壓縮噪聲,同時也可以對人臉等關鍵區域進行修復,去除運動模糊,還能夠利用幀間信息修復因對焦失真產生的模糊。
經典案例 集智高清助力小米商城降本增效
如何在一定碼率范圍內讓畫質保持高清呢?近期,小米商城近期遇到了同樣的問題,將視頻碼率降低到可接受成本范圍內,畫面效果很多地方會出現畫面模糊、邊緣毛刺的現象。自11月上線,在金山云集智高清及KSC265轉碼的雙重幫助下,已取得了顯著成效,集智高清為其節省56.3%的視頻傳輸帶寬的前提下并在主觀效果有所增強。
在節省帶寬方面,集智高清融合多種技術使編碼后的視頻體積縮小,節省20%-40%視頻傳輸帶寬,配合KSC265轉碼技術,可二次降低視頻傳輸帶寬,為小米商城大幅降低成本。
在智能碼控方面,集智高清通過神經網絡對畫面內容分析預測,能夠為每一個視頻智能調節至最適合的編碼參數,可在保證畫質的前提下降低視頻碼率。
在高清體驗方面,視頻在編碼前進行前處理工作,采用機器學習加圖像算法對視頻中出現的模糊、噪點、色塊等問題進行處理修復。可明顯提升視頻的主觀效果,處理后的視頻MOS和VMAF可遠高于小米商城原視頻。
在精細處理方面,通過ROI區域檢測,集智高清可將視頻內容畫質增強處理的更加精細化。先將每幀的視頻內容分層,再將視頻畫面的主體和背景根據人眼視覺特性做差異化處理。使得主體更加突出,背景更加純凈。
對此,小米商城的研發工程師丁亮表示:金山云集智高清通過AI建模,識別不同的使用場景,分區域對圖片做處理,去除噪點、模糊視頻質量問題,將圖像紋理保存下來,這樣節省了更多帶寬,并且根據人眼關注的內容做視覺感知保護,對占碼率的其它區域進行優化,運用碼率智能控制和編碼動態優化,將AI畫質增強至視頻的細節中,畫質由此也得到了提升,實現了畫質增強的同時節省了帶寬,我們用更少的錢讓用戶看到了更清晰的視頻。
毋庸置疑,作為覆蓋產品眾多、日活量數百萬的小米商城,金山云集智高清產品成功助力小米商城在視頻方面實現大幅地降本增效,樹立了行業的成功案例標桿。
目前,金山云視頻云在視頻編碼方面,KSC265編碼速度及壓縮率處于行業領先水平,結合AI的集智高清可以支持在同畫質下壓縮率達到60%的云轉碼服務,為客戶提供最優成本下的高清體驗。面對5G時代視頻體量爆炸式增長,集智高清將助力行業實現更大收益的降本增效。