
LiveVideoStack:吳曉然你好,能否向LiveVideoStack的讀者介紹下自己,以及目前主要的工作以及關(guān)注的技術(shù)方向?
吳曉然:大家好,我是來(lái)自聲網(wǎng)的視頻工程師吳曉然,已經(jīng)有十年的多媒體從業(yè)經(jīng)驗,從最初的多媒體用戶(hù)界面,多媒體中間件,到Codec的集成與優(yōu)化,Codec驅動(dòng)開(kāi)發(fā),我覺(jué)得多媒體和實(shí)時(shí)通信一直是我喜歡和關(guān)注的方向。
LiveVideoStack:能否介紹下聲網(wǎng)在視頻架構、編解碼、傳輸方面的探索?
吳曉然:聲網(wǎng)其實(shí)在多年以前就開(kāi)始了對實(shí)時(shí)通信領(lǐng)域的探索,實(shí)時(shí)通信的兩個(gè)基礎就是網(wǎng)絡(luò )傳輸和編解碼,通過(guò)多年的積累,聲網(wǎng)已經(jīng)建立了專(zhuān)為實(shí)時(shí)傳輸設計的虛擬通信網(wǎng)絡(luò ),覆蓋全球超過(guò)200個(gè)國家,在視頻架構和編解碼方面,聲網(wǎng)也針對實(shí)時(shí)傳輸做了大量的創(chuàng )新及優(yōu)化工作,根據不同的網(wǎng)絡(luò )類(lèi)型,終端設備,應用場(chǎng)景,都會(huì )作出一些自適應的調整,這也是為什么我們的SDK可以很好的覆蓋所有平臺的原因。
LiveVideoStack:我注意到聲網(wǎng)開(kāi)始探索新型的Codec,如AV1、VVC。是否可以分享一些您觀(guān)察到的Codec的應用的趨勢?另外,您判斷某一個(gè)Codec進(jìn)入商用市場(chǎng)的標準是什么?
吳曉然:是的,AV1已經(jīng)呼之欲出,因為Open Media聯(lián)盟的豪華整容,相信不久之后便會(huì )掀起一股熱潮。VVC作為H.266應該還有一段時(shí)間,預計會(huì )在兩三年后推出,大家也可以拭目以待。新一代的編碼器帶來(lái)的壓縮效率提升是毋庸置疑的,但一個(gè)Codec能否進(jìn)入商用,能否普及,是有很多因素共同決定的。H.264已經(jīng)霸占市場(chǎng)十多年,雖然H.265在壓縮效率上全面超越H.264,但依然無(wú)法撼動(dòng)H.264的統治地位,一方面H.264是一個(gè)非常優(yōu)秀的標準,很多開(kāi)源的軟件和各種平臺的優(yōu)化也加速了它的應用,另一方面,H.265高昂的專(zhuān)利費和部署成本也讓商家望而卻步。
LIveVideoStack:聲網(wǎng)是否使用了硬件加速做編碼/轉碼?
吳曉然:聲網(wǎng)的編碼器同時(shí)擁有軟件編碼和硬件編碼功能,會(huì )根據不同的平臺,場(chǎng)景及功耗等因素決定是否使用硬件編碼器。因為實(shí)時(shí)通信需要Codec和網(wǎng)絡(luò )模塊結合,對抗網(wǎng)絡(luò )常見(jiàn)的丟包和抖動(dòng)問(wèn)題,軟件編碼器在靈活性方面更勝一籌,但硬件編碼器的低功耗也會(huì )讓它在一些場(chǎng)合有用武之地。
LiveVideoStack:未來(lái)5G會(huì )對網(wǎng)絡(luò )帶寬和質(zhì)量有一定的改善,您如何看待5G帶來(lái)的機會(huì )和挑戰?聲網(wǎng)開(kāi)始針對5G做了哪些準備和探索?
吳曉然:5G帶來(lái)的帶寬提升顯然可以提升終端用戶(hù)的使用體驗,我們可以編更大的分辨率提升清晰度,編更多的幀提升流暢度,但網(wǎng)絡(luò )的穩定性也是影響用戶(hù)體驗的一大因素,如果視頻經(jīng)常卡頓,那再清晰也是無(wú)濟于事的,不同的網(wǎng)絡(luò )有不同的特點(diǎn),有線(xiàn),WiFi,4G/5G都有各自不同的網(wǎng)絡(luò )模型,聲網(wǎng)擁有自己的數據媒體后臺,會(huì )從大量的用戶(hù)數據中提取出不同網(wǎng)絡(luò )的特征,建立網(wǎng)絡(luò )模型,針對性的進(jìn)行算法改進(jìn)。
LiveVideoStack:您是否看好VR或2K~8K視頻互動(dòng)直播?
吳曉然:視頻互動(dòng)直播是大勢所趨,有可能成為年輕人以后主要的社交娛樂(lè )渠道,對于VR我不是很了解,據我所知,這塊市場(chǎng)目前并不成熟,從Google暫停了VR攝像機的開(kāi)發(fā)可見(jiàn)一斑,而且現在的VR設備基本上都眼罩或者頭套,對用戶(hù)體驗還是有影響,相比之下,我更看好AR的市場(chǎng)前景。
LiveVideoStack:能否劇透下您在LiveVideoStackCon 2018分享的內容嗎?
吳曉然:這次LiveVideoStackCon大會(huì ),我想分享一些我們聲網(wǎng)針對QoE實(shí)時(shí)通信視頻的Codec的優(yōu)化和探索。之前我們優(yōu)化Codec,只是優(yōu)化Codec本身,其實(shí)只是一個(gè)局部最優(yōu)解,而且在實(shí)時(shí)通信領(lǐng)域,用戶(hù)的QoE才是最終目標,這和很多因素相關(guān),只有你的Codec優(yōu)化適應了當前的網(wǎng)絡(luò )狀況,設備平臺,應用場(chǎng)景,用戶(hù)才能得到最佳的體驗,我們所要找的其實(shí)是全局最優(yōu)解。
