編輯 | Tina
音視頻的大時(shí)代正在加速到來。
經(jīng)歷了2016年的直播風(fēng)口，2018的短視頻風(fēng)口，以及疫情后更大的線上場(chǎng)景爆發(fā)潮，音視頻已經(jīng)成為了各個(gè)行業(yè)的基礎(chǔ)設(shè)施。會(huì)議、教學(xué)、銷售等各種場(chǎng)景都被搬到了線上，音視頻應(yīng)用領(lǐng)域戰(zhàn)成了一片紅海。與之前相比，最近這波爆發(fā)下的場(chǎng)景涉及到的技術(shù)更為復(fù)雜，不再僅是基于CDN的推拉流，而是以實(shí)時(shí)交互的RTC技術(shù)為主。
今年初，火爆的音頻聊天應(yīng)用Clubhouse宣布完成C輪融資，估值達(dá)到了40億美元。伴隨著Clubhouse優(yōu)異表現(xiàn)，開始出現(xiàn)越來越多的語聊房產(chǎn)品，風(fēng)口下誰能快速完成搭建率先推出類似功能，誰就能贏取大批用戶。激烈競(jìng)爭(zhēng)下尤其考驗(yàn)到各家的技術(shù)能力，像融云這樣的位列實(shí)時(shí)音視頻技術(shù)第一陣營的服務(wù)商也迅速浮出水面。
為探討音視頻技術(shù)發(fā)展以及未來趨勢(shì)，InfoQ采訪了融云聯(lián)合創(chuàng)始人兼CTO楊攀。他將在2021全球互聯(lián)網(wǎng)通信云大會(huì)（WICC）發(fā)表《以通信為核心的開發(fā)者服務(wù)生態(tài)探索》的演講。
采訪嘉賓簡(jiǎn)介：
楊攀，融云聯(lián)合創(chuàng)始人兼CTO。大規(guī)模高并發(fā)通信和社交平臺(tái)領(lǐng)域?qū)＜?。早期主要從事電?SP 行業(yè)的工作，中國最早的一批 .NET 開發(fā)者，參與了 MSN Mobile China Hub 的開發(fā)管理工作，后加入神州泰岳飛信團(tuán)隊(duì)，先后負(fù)責(zé)了飛信的社交平臺(tái)、開放平臺(tái)、即時(shí)通訊平臺(tái)的研發(fā)管理工作。2014 年聯(lián)合創(chuàng)立融云，向開發(fā)者提供面向全球的即時(shí)通訊和實(shí)時(shí)音視頻云服務(wù)。目前在融云主要負(fù)責(zé)公司的產(chǎn)品和研發(fā)的工作。
RTC技術(shù)的爆發(fā)
疫情以來，由于大部分場(chǎng)景轉(zhuǎn)到線上，極快地催熱了整個(gè)實(shí)時(shí)音視頻在各個(gè)行業(yè)的落地應(yīng)用。再加上數(shù)字化轉(zhuǎn)型升級(jí)浪潮下，各企業(yè)為了適應(yīng)業(yè)務(wù)創(chuàng)新的需求，需要變革通信方式，企業(yè)內(nèi)外部溝通已從早期單純的話音、短信等逐漸發(fā)展為基于互聯(lián)網(wǎng)形式的即時(shí)通訊、實(shí)時(shí)音視頻等多種交互方式。實(shí)時(shí)通信使用量激增，實(shí)時(shí)音視頻技術(shù)也上升到一個(gè)全新的高度。
為了順應(yīng)時(shí)勢(shì)，今年1月，W3C 和 IETF 制定頒布了 WebRTC 標(biāo)準(zhǔn)，這是一個(gè)里程碑性的事件。WebRTC是線上通信及協(xié)作服務(wù)的基石，WebRTC標(biāo)準(zhǔn)正式發(fā)布之前，各個(gè)廠商有幾種做法：一種是用私有的方案和協(xié)議，另一種是遵循這個(gè)標(biāo)準(zhǔn)來做。還有一種中間狀態(tài)，就是基于WebRTC標(biāo)準(zhǔn)，再加上自己的一些技術(shù)方案進(jìn)行一些定制，但一些修改并不跟官方的標(biāo)準(zhǔn)兼容。有了統(tǒng)一的標(biāo)準(zhǔn)之后，利于音視頻能力的普及，更有望實(shí)現(xiàn)自由地在互聯(lián)網(wǎng)上進(jìn)行實(shí)時(shí)音視頻傳輸。
需求的爆發(fā)促進(jìn)了標(biāo)準(zhǔn)的推出，楊攀在接受采訪時(shí)對(duì)InfoQ表示：“明顯感覺到這兩年，無論是技術(shù)研發(fā)還是這個(gè)標(biāo)準(zhǔn)的推出都在大大地加速。這跟整個(gè)這個(gè)產(chǎn)業(yè)對(duì)音視頻通訊的訴求非常強(qiáng)烈也有關(guān)系，起著互相推動(dòng)的作用。”
融云從成立的第一天開始就兼容WebRTC 標(biāo)準(zhǔn)。WebRTC標(biāo)準(zhǔn)官方定義了一個(gè)端到端之間如何進(jìn)行音視頻通話，包含基本的音頻處理、視頻處理、降噪處理等，融云在此基礎(chǔ)上又做了很多針對(duì)音視頻質(zhì)量和弱網(wǎng)處理的具體優(yōu)化和功能提升。
弱網(wǎng)是互聯(lián)網(wǎng)上是一個(gè)比較普遍的現(xiàn)象。比如說在室外使用4G、5G流量，如果有因?yàn)榄h(huán)境造成的信號(hào)不穩(wěn)定的情況下，通過動(dòng)態(tài)調(diào)整碼率、FEC、NACK 等策略來保證音視頻通訊過程中的質(zhì)量。如果這些做不好，就無法形成最基礎(chǔ)的服務(wù)。
實(shí)際到具體場(chǎng)景下，一定會(huì)涉及到通訊網(wǎng)絡(luò)，通過一些服務(wù)器的中轉(zhuǎn)服務(wù)，個(gè)人開發(fā)者實(shí)現(xiàn)這些服務(wù)幾乎是不可能的，只能通過一些第三方開源項(xiàng)目。但這些第三方開源項(xiàng)目，普遍未經(jīng)過生產(chǎn)級(jí)別的海量業(yè)務(wù)壓力測(cè)試。用戶數(shù)變多、并發(fā)變高、用戶覆蓋區(qū)域變廣以后，那么絕大多數(shù)的開源項(xiàng)目都沒法直接滿足需求。這時(shí)就需要融云這樣的云服務(wù)廠商來解決云端的通訊網(wǎng)絡(luò)質(zhì)量和調(diào)度策略方面的事情。也就是說，實(shí)現(xiàn)企業(yè)級(jí)通信服務(wù)并非難事，但如何在高并發(fā)、大流量的情況下依然能夠保證正常運(yùn)行才是核心所在。
為何要統(tǒng)一為一套SDK
融云是最早的一批提供即時(shí)通訊云服務(wù)的企業(yè)之一。依賴于團(tuán)隊(duì)之前在通訊領(lǐng)域里做過億級(jí)活躍用戶規(guī)模的IM項(xiàng)目經(jīng)驗(yàn)，能保證系統(tǒng)的消息不丟、不重復(fù)、不亂序，融云很快成為了中國第三大即時(shí)通訊平臺(tái)，僅排在微信和 QQ 之后。
在服務(wù)用戶的過程中，融云發(fā)現(xiàn)社交的玩法與場(chǎng)景逐漸多元，開發(fā)者和一些企業(yè)進(jìn)行軟件開發(fā)時(shí)，越來越多的開發(fā)者同時(shí)需要IM、音視頻、推送三種功能場(chǎng)景的能力。
2020年，融云推出了“IM即時(shí)通訊＋RTC實(shí)時(shí)音視頻＋PUSH推送”的一體化解決方案，“用一套 SDK ，解決所有通信場(chǎng)景”，讓開發(fā)者能用同一個(gè)SDK進(jìn)行開發(fā)，使用共同的后臺(tái)服務(wù)、前端接口、計(jì)費(fèi)排查工具，能降低運(yùn)營難度和使用成本。
像語聊房之所以能被各企業(yè)快速的搭建起來，技術(shù)的推動(dòng)是一個(gè)重要的因素，以融云融合 IM 和音視頻的語聊房 SDK 為例，開發(fā)者利用這樣一套 SDK，可以在 30 分鐘內(nèi)快速集成語聊房場(chǎng)景能力。
對(duì)于如何在行業(yè)領(lǐng)域里建立技術(shù)壁壘，楊攀認(rèn)為其中一個(gè)關(guān)鍵在于：“能夠跟上整個(gè)時(shí)代發(fā)展潮流，快速的響應(yīng)，為客戶提供最佳的解決方案?！?/p>
5G的發(fā)展給基礎(chǔ)設(shè)施帶來了低延遲、高帶寬、高并發(fā)性能上的提升，那么從技術(shù)上，我們就可以處理更高分辨率的視頻，得到更好的音質(zhì)，而這些方面對(duì)音視頻編解碼提出了更高的要求。伴隨5G的場(chǎng)景變化，給整個(gè)產(chǎn)業(yè)也帶來了非常大的變化，原來因?yàn)槌杀镜膯栴}沒法做的，現(xiàn)在都可以進(jìn)行海量應(yīng)用了。
比如說5G技術(shù)給VR和云游戲提供了很好的網(wǎng)絡(luò)基礎(chǔ)設(shè)施，VR傳輸?shù)囊曨l信息量是傳統(tǒng)的視頻體系量的若干倍，而云游戲也不再需要下載很大的游戲包到本地，現(xiàn)在依靠音視頻實(shí)時(shí)通信的技術(shù)，把遠(yuǎn)端的服務(wù)器上的運(yùn)行的游戲畫面實(shí)時(shí)傳回到用戶側(cè)，再通過用戶操作實(shí)時(shí)通過信令的方式傳回到引擎，可以實(shí)現(xiàn)在線玩游戲。這就需要適應(yīng)整個(gè)技術(shù)趨勢(shì)，在通信承載能力上，包括視頻、音頻質(zhì)量處理的能力，去做持續(xù)的改進(jìn)。同時(shí)也要適應(yīng)客戶的終端上的改變，從顯示屏和手機(jī)屏幕，再到以后的 AR、VR、XR 終端。
另一方面，人工智能也對(duì)音視頻有很多優(yōu)化?，F(xiàn)在音視頻優(yōu)化算法都或多或少引入了一些人工智能降噪技術(shù)來提高音頻、視頻質(zhì)量。另外一方面是基于人工智能的一些具體的業(yè)務(wù)場(chǎng)景需求，比如說虛擬人像、虛擬聲音的合成處理、實(shí)時(shí)美顏、實(shí)時(shí)美聲，融云需要對(duì)應(yīng)地提供這些功能的插件，需要在SDK和服務(wù)端這一側(cè)開放足夠多的接口API，支持這樣的一些服務(wù)。而且還需要為未來每個(gè)可能出現(xiàn)的場(chǎng)景，給開發(fā)者推出針對(duì)性的SDK。
楊攀表示：“在遵循業(yè)內(nèi)標(biāo)準(zhǔn)的前提下，我們所有的技術(shù)都是完全由自己核心掌握的，相關(guān)的代碼都是自融云創(chuàng)立以后重新正向開發(fā)的，所以面對(duì)客戶的最新的需求的時(shí)候，我們往往可以第一時(shí)間給客戶提供具體的解決方案，或者根據(jù)客戶的需求快速迭代出新的產(chǎn)品功能、開發(fā)支持，甚至可以做到以周為單位給客戶提供新的功能。保持快速迭代的同時(shí)，通過這些年的積累，各種接口成為了業(yè)界最全的，接口數(shù)量在業(yè)內(nèi)也是遙遙領(lǐng)先的。這些都是開發(fā)者服務(wù)廠商的核心競(jìng)爭(zhēng)力?！?/p>
技術(shù)與服務(wù)并重
目前融云的這套集“IM即時(shí)通訊＋RTC實(shí)時(shí)音視頻＋PUSH推送”于一體的解決方案已經(jīng)迭代到了第五代，早期通過一些輸入驗(yàn)證了核心技術(shù)點(diǎn)，后邊幾次迭代逐步提升通信服務(wù)質(zhì)量，以及對(duì)開發(fā)者的接口友好度，讓開發(fā)者能夠以更低的成本、更快速集成和使用這些SDK。
提供穩(wěn)定安全的服務(wù)最基礎(chǔ)的體現(xiàn)是在整個(gè)產(chǎn)品服務(wù)的運(yùn)維體系和開發(fā)的流程方面。線上產(chǎn)品在運(yùn)維的過程中，是否有足夠多的監(jiān)控，發(fā)布流程、升級(jí)過程是否足夠的科學(xué)穩(wěn)定，本身架構(gòu)的設(shè)計(jì)是否足夠的健壯，這些都是用來保障安全穩(wěn)定服務(wù)的基礎(chǔ)。
另外一方面，在整個(gè)的產(chǎn)品的周期范圍內(nèi)，通過一定的機(jī)制能第一時(shí)間發(fā)現(xiàn)并快速解決問題，這也是一個(gè)非常重要的能力。楊攀講道：“真正的2B的業(yè)務(wù)包括兩個(gè)方面，一是有沒有技術(shù)實(shí)力能解決客戶的問題。二是對(duì)客戶本身的業(yè)務(wù)是否有足夠的理解。我們需要在開發(fā)者發(fā)現(xiàn)問題之前，把出現(xiàn)的問題解決掉?！?/p>
穩(wěn)定可靠的技術(shù)優(yōu)勢(shì)，贏回來的就是口碑?？蛻粲昧水a(chǎn)品，體驗(yàn)好的話必定會(huì)再推薦給別人。
在開發(fā)者服務(wù)這個(gè)領(lǐng)域，口碑遠(yuǎn)遠(yuǎn)比市場(chǎng)的品牌營銷、市場(chǎng)的宣傳更重要。因?yàn)殚_發(fā)者都是非常理性的群體，他們使用之前往往都會(huì)問一下身邊的人。楊攀解釋說，融云這些年來不斷的擴(kuò)展，在市場(chǎng)宣傳方面投入的經(jīng)費(fèi)，可以說是遠(yuǎn)遠(yuǎn)低于其他的廠商，客戶數(shù)、市場(chǎng)占有率的提高，都是口碑傳播的效果。
中國的開發(fā)者服務(wù)產(chǎn)業(yè)，還屬于早期階段。市場(chǎng)競(jìng)爭(zhēng)會(huì)越來越激烈，人力成本也越來越高，人力成本的提高，最大的促進(jìn)因素在2B行業(yè)，也就是幫別人解決問題的需求會(huì)越來越多，因?yàn)閹蛣e人解決問題是在降低他的成本。越是競(jìng)爭(zhēng)激烈的行業(yè)越需要去優(yōu)化自己的成本結(jié)構(gòu)，提高自己的效率，也就越需要找更低成本的第三方來替代自己的工作，楊攀認(rèn)為開發(fā)者服務(wù)行業(yè)遲早會(huì)迎來爆發(fā)階段。
融云從 2014 年開始就進(jìn)入這個(gè)領(lǐng)域，可以算是開發(fā)者服務(wù)領(lǐng)域里面比較早期的廠商，多年來積累了開發(fā)者服務(wù)行業(yè)的各種經(jīng)驗(yàn)和案例。在WICC 2021大會(huì)，楊攀將為開發(fā)者分享融云關(guān)于開發(fā)者服務(wù)生態(tài)的思考，圍繞國內(nèi)開發(fā)者服務(wù)產(chǎn)業(yè)現(xiàn)狀、開發(fā)者需求分析、融云開發(fā)者服務(wù)體系建設(shè)等多方面展開。同時(shí)，也會(huì)和其他幾位重磅嘉賓一起以“開發(fā)者生態(tài)”為主題進(jìn)行高峰對(duì)話。
本次大會(huì)主要聚焦通信云領(lǐng)域的尖端技術(shù)，尤其是音視頻領(lǐng)域的新技術(shù)與應(yīng)用，分享在線教育、社交泛娛樂等多行業(yè)的最佳實(shí)踐思考，主要價(jià)值在于更廣泛地開拓開發(fā)者視野和更好地服務(wù)開發(fā)者生態(tài)。會(huì)議設(shè)有三個(gè)分論壇：“網(wǎng)絡(luò)傳輸和系統(tǒng)架構(gòu)”、“RTC 新技術(shù)與應(yīng)用”、“場(chǎng)景化賦能與創(chuàng)新” 。除了分論壇的眾多業(yè)界技術(shù)大咖之外，還請(qǐng)來了清華大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)系的長(zhǎng)聘教授孫立峰，他將帶來《互聯(lián)網(wǎng)音視頻服務(wù)：從 AI 賦能到智慧內(nèi)生》的主題演講；以及北京大學(xué)的副教授張行功博士，他將帶來《虛擬現(xiàn)實(shí)視頻的應(yīng)用和技術(shù)》的內(nèi)容分享。
