亞太內容分發大會暨CDN峰會一直致力于推動CDN產業深度融合發展和市場普及,現已成為亞太地區影響力最大的內容分發網絡盛會。十年來,在以阿里云、網宿科技、騰訊云等亞太CDN產業聯盟成員孜孜不輟的努力下,CDN產業已經成為基礎性設施網絡,以堅定的基石之姿,支撐起中國成為世界最大的互聯網市場。
隨著全球數字化、“一帶一路”戰略、企業出海浪潮的盛行,亞太內容分大會暨CDN峰會的影響力正在逐漸向全球延伸,同時也將中國智造CDN產業推廣向全球每一個角落。
在6月9日下午舉辦的【互動直播論壇】上,拍樂云的架構師 奚振發表了題為《拍樂云實時音視頻產品創新與場景實踐》的精彩演講。
奚振首先對拍樂云的音視頻服務與技術架構進行了介紹,通過提供pano cloud,客戶能夠使用拍樂云的全棧音視頻服務,而為了解決互聯網的不確定性,構建在pano Backbone實時傳輸加速網絡上的云通信服務則保證了全球的網絡必達,可承載超大并發場景。
01 實時傳輸,保證全球服務的穩定高效
奚振首先對拍樂云的音視頻服務與技術架構進行了介紹,通過提供 Pano cloud,客戶能夠使用全棧的音視頻服務,而為了解決互聯網的不確定性,構建在 Pano Backbone 實時傳輸加速網絡上的云通信服務則保證了全球的網絡必達,可承載超大并發場景。
奚振介紹,拍樂云是 RTC 的 PaaS 廠商,通過集成 Pano SDK,客戶能夠使用 Pano Cloud 的全棧音視頻服務,針對不同行業的客戶,提供專業的解決方案。
至于為什么需要構建 Pano Backbone?則是為了解決互聯網的不確定性。拍樂云借鑒了視頻會議領軍者 WebEx 和 Zoom 全球大規模音視頻會議的經驗,打造了自己的 Pano Backbone,承載大并發場景,而微服務的架構,則保障產品的穩定與高可用,終端采用智能路由,實時探測鏈路質量,自適應調整組網與路由策略,客戶端就近接入,高效解決最后一公里問題。
02 產品創新,追求極致用戶體驗
基于產品的創新,為了解決用戶的難題,奚振總結了以下幾點對于未來實時音視頻通信行業的的落地場景。
創新點1:視頻標注
在視頻通話或屏幕共享的整片畫面中,如何讓我們的視線聚焦起來?視頻標注會解決這個問題,在大量信息中協助我們找到關鍵的焦點。在金融場景介紹理財產品時,可以圈出重要條款,在線上樂高課堂時,劃出重點,而在視頻會議、應急指揮、遠程維修等方面,都可以找到非常實用的場景。
視頻標注未來發展方向是什么?是AR。現在的技術是在平面做繪制,而在可見的數年之內,則能夠把標注直接繪制在物體上,從平面過渡到三維空間,是技術的進一步迭代發展。
場景2:多攝像頭采集
線上教學時,由于設備的單一,我們通常會切換攝像頭或移動手機,這樣會嚴重影響教學過程的流暢性,中斷課程。而拍樂云追求還原完整的線下課堂,營造教學沉浸感,可單設備開啟多個攝像頭,提前布置攝像頭,充分還原線下教學場景,發送多路視頻流,大大提升用戶體驗。
實時通信的發展是在不斷追求更豐富、更完整信息的輸入,從文字到語音,再幾年發展為視頻,視頻的清晰度和大小在不斷提升。多攝像頭采集是當前單攝像頭畫面的進一步增強。再往后,可推測的階段即是VR,把整個虛擬現實的交互帶到實時通信中來,讓通信的雙方能夠在虛擬空間中達成溝通交流,是未來發展的方向。
場景3:視頻矯正
在線上美術教學中存在著一個難題,手機擺在正面會被遮擋,而擺在側面則采集到的畫面是傾斜的,不規則的畫面,而拍樂云通過幾何失真參數估計、映射關系計算等低復雜度高效率的毫秒級視頻處理算法對原視頻進行矯正處理,而在實時視頻中,毫秒級算法尤為重要。未來,實時視頻處理算法有有著巨大的發展潛力。
場景4:視頻白板,云端互動
數據白板的還原度由什么決定?主要是PPT的動效,拍樂云的PPT動效還原度能夠高達95%,可以支持PPT內音視頻同步播放,教師端播到幾分幾秒,學生端也實時同步。課程中臨時的想法,靈感爆發,可以用圖片的形式一鍵分享,線下白板有邊界,而線上白板沒有邊界,主講人的視角看到哪,學生也會同步跟隨,這就是視角跟隨。
遇到問題互動則進入了多白板功能,每塊白板都是獨立的,每個人都可以寫或畫下自己的想法與創意,主講人可以選擇任意一塊白板進行交互。
拍樂云互動白板技術架構五大優勢:帶寬占用少,清晰度,更高超低延遲,同步推流,同步錄制。
我們的互動白板有非常大的優勢,在使用數據白板架構下,保證了帶寬占用少、清晰度更高、超低延遲等傳統優勢的同時,通過服務器轉視頻流的方式,支持將白板同步推流到CDN,同時錄制為視頻文件存儲,便于回放觀看。
奚振介紹。
數據白板轉碼存儲好的圖片下發到客戶端本地,只是同步翻頁的數據,可想而知它的帶寬占用非常少,而云端數據維持能力則保證了出現異常時,白板的數據會繼續存在,重新回到房間即可繼續教學。
03 場景實踐,落地技術創新的價值
基于未來美術課的發展趨勢與領先的技術打造下一代在線美術教學解決方案,拍樂云給出了這樣的答案。
支持雙路攝像頭,一路拍攝學生和老師,一路拍攝兩邊的畫板;支持人像和畫板的大小流切換,確保帶寬用在合適的地方;白板支持教材同步共享,分享高清的教材,在美術課上,畫的清晰度非常重要;實時矯正和標注,確保畫紙在視頻中擺正,實時標注繪畫的重點和細節。
用戶體驗是在線教育產品的核心競爭力之一,也是在缺乏評價標準的數據教育賽道里相對明確的評價方式。因為學科教育非常簡單,成績就是一切,但是素質教育很難用主觀評價來判斷。教學過程的舒適感成為了學員學習體驗的直觀感受,也是影響轉介紹率的重要因素。
奚振介紹:“拍樂云在美術教學場景上定制了非常多的能力,也是在當前最好的技術下,給予用戶最好的體驗。它的應用還有很多地方可以去挖掘,不僅僅是美術教學,在很多其他場景下也有使用的地方。”
展望未來,拍樂云將會持續打磨產品和技術,深耕行業場景,為企業和開發者解決更多在線上實時互動場景中的痛點,在不確定的未來找到用戶體驗增長的確定性。