LiveVideoStack:吳曉然你好,能否向LiveVideoStack的讀者介紹下自己,以及目前主要的工作以及關(guān)注的技術(shù)方向?
吳曉然:大家好,我是來自聲網(wǎng)的視頻工程師吳曉然,已經(jīng)有十年的多媒體從業(yè)經(jīng)驗,從最初的多媒體用戶界面,多媒體中間件,到Codec的集成與優(yōu)化,Codec驅(qū)動開發(fā),我覺得多媒體和實時通信一直是我喜歡和關(guān)注的方向。
LiveVideoStack:能否介紹下聲網(wǎng)在視頻架構(gòu)、編解碼、傳輸方面的探索?
吳曉然:聲網(wǎng)其實在多年以前就開始了對實時通信領(lǐng)域的探索,實時通信的兩個基礎(chǔ)就是網(wǎng)絡(luò)傳輸和編解碼,通過多年的積累,聲網(wǎng)已經(jīng)建立了專為實時傳輸設(shè)計的虛擬通信網(wǎng)絡(luò),覆蓋全球超過200個國家,在視頻架構(gòu)和編解碼方面,聲網(wǎng)也針對實時傳輸做了大量的創(chuàng)新及優(yōu)化工作,根據(jù)不同的網(wǎng)絡(luò)類型,終端設(shè)備,應(yīng)用場景,都會作出一些自適應(yīng)的調(diào)整,這也是為什么我們的SDK可以很好的覆蓋所有平臺的原因。
LiveVideoStack:我注意到聲網(wǎng)開始探索新型的Codec,如AV1、VVC。是否可以分享一些您觀察到的Codec的應(yīng)用的趨勢?另外,您判斷某一個Codec進(jìn)入商用市場的標(biāo)準(zhǔn)是什么?
吳曉然:是的,AV1已經(jīng)呼之欲出,因為Open Media聯(lián)盟的豪華整容,相信不久之后便會掀起一股熱潮。VVC作為H.266應(yīng)該還有一段時間,預(yù)計會在兩三年后推出,大家也可以拭目以待。新一代的編碼器帶來的壓縮效率提升是毋庸置疑的,但一個Codec能否進(jìn)入商用,能否普及,是有很多因素共同決定的。H.264已經(jīng)霸占市場十多年,雖然H.265在壓縮效率上全面超越H.264,但依然無法撼動H.264的統(tǒng)治地位,一方面H.264是一個非常優(yōu)秀的標(biāo)準(zhǔn),很多開源的軟件和各種平臺的優(yōu)化也加速了它的應(yīng)用,另一方面,H.265高昂的專利費和部署成本也讓商家望而卻步。
LIveVideoStack:聲網(wǎng)是否使用了硬件加速做編碼/轉(zhuǎn)碼?
吳曉然:聲網(wǎng)的編碼器同時擁有軟件編碼和硬件編碼功能,會根據(jù)不同的平臺,場景及功耗等因素決定是否使用硬件編碼器。因為實時通信需要Codec和網(wǎng)絡(luò)模塊結(jié)合,對抗網(wǎng)絡(luò)常見的丟包和抖動問題,軟件編碼器在靈活性方面更勝一籌,但硬件編碼器的低功耗也會讓它在一些場合有用武之地。
LiveVideoStack:未來5G會對網(wǎng)絡(luò)帶寬和質(zhì)量有一定的改善,您如何看待5G帶來的機(jī)會和挑戰(zhàn)?聲網(wǎng)開始針對5G做了哪些準(zhǔn)備和探索?
吳曉然:5G帶來的帶寬提升顯然可以提升終端用戶的使用體驗,我們可以編更大的分辨率提升清晰度,編更多的幀提升流暢度,但網(wǎng)絡(luò)的穩(wěn)定性也是影響用戶體驗的一大因素,如果視頻經(jīng)?D,那再清晰也是無濟(jì)于事的,不同的網(wǎng)絡(luò)有不同的特點,有線,WiFi,4G/5G都有各自不同的網(wǎng)絡(luò)模型,聲網(wǎng)擁有自己的數(shù)據(jù)媒體后臺,會從大量的用戶數(shù)據(jù)中提取出不同網(wǎng)絡(luò)的特征,建立網(wǎng)絡(luò)模型,針對性的進(jìn)行算法改進(jìn)。
LiveVideoStack:您是否看好VR或2K~8K視頻互動直播?
吳曉然:視頻互動直播是大勢所趨,有可能成為年輕人以后主要的社交娛樂渠道,對于VR我不是很了解,據(jù)我所知,這塊市場目前并不成熟,從Google暫停了VR攝像機(jī)的開發(fā)可見一斑,而且現(xiàn)在的VR設(shè)備基本上都眼罩或者頭套,對用戶體驗還是有影響,相比之下,我更看好AR的市場前景。
LiveVideoStack:能否劇透下您在LiveVideoStackCon 2018分享的內(nèi)容嗎?
吳曉然:這次LiveVideoStackCon大會,我想分享一些我們聲網(wǎng)針對QoE實時通信視頻的Codec的優(yōu)化和探索。之前我們優(yōu)化Codec,只是優(yōu)化Codec本身,其實只是一個局部最優(yōu)解,而且在實時通信領(lǐng)域,用戶的QoE才是最終目標(biāo),這和很多因素相關(guān),只有你的Codec優(yōu)化適應(yīng)了當(dāng)前的網(wǎng)絡(luò)狀況,設(shè)備平臺,應(yīng)用場景,用戶才能得到最佳的體驗,我們所要找的其實是全局最優(yōu)解。