亚洲网站免费_国产一区二区三区在线看麻豆 _国产精品毛片一区二区三区 _麻豆精品网站

百度云劉寧:云智時代的CDN平臺

2017-04-14 16:18:53 熱度:
2017年4月12-13日,2017亞太CDN峰會在北京隆重召開,在13日上午的視頻云論壇上,百度系統副總監劉寧作了題為《云智時代的CDN平臺》主題報告。
 

百度系統副總監劉寧
 
用戶需求趨向對CDN提出新的需求
 
用戶需求趨向的改變帶給了整個CDN行業發展的動力,體現在通信社交、消費需求、個性化以及kill time等已經變成了用戶的需求,同時還包括泛信息、泛娛樂。這些用戶需求的典型特點是富媒體化,對于視頻點播、視頻直播包括短視頻行業對這些方面有了更多的需求,也給CDN行業提出了很多的要求。
 
越來越多的用戶無論是內部用戶還是外部用戶,在用戶體驗方面都提出了非常高的要求,不光是可用性、質量還有更低的成本、技術上更快更好的研發和對接,用戶還對云廠商人工智能、大數據的能力提出了相應的要求。
 
ABC+CDN:云+智+數+CDN合力為企業發展賦能
 
百度云的CDN平臺實際上在推出產品之前也在百度內部打磨了七年多的時間,百度云內部從各個層面上有非常多的經驗和技術積累,比如說網絡層,在多級CDN的覆蓋、多線的源站、BGP的源站及非常多的小運營商peer等等;在軟件層面比如流量的調度、GSLB、4 7層負載均衡以及熱點的負載均衡、緩存系統的優化、AI、黃反識別、視頻標簽等都有非常豐富的經驗。通過監控平臺可以實時發現百度云上出現了什么問題,及時做調度。百度云的配置管理方便用戶快速做配置變更,在基礎服務層面包括文件上傳、內容刷新、推流、轉碼以及數據的分析;同時在解決方案上,百度云給用戶提供了相對比較全面的解決方案,比如存儲的分發、大文件的分發、小文件分發、視頻的解決方案等等。
 
百度的CDN平臺以及百度云通過借助百度的AI和BIG DATA可以給用戶提供更高的價值。
     
精細打磨CDN產品能力,提供高品質CDN服務
 
高品質的CDN平臺通常要滿足三點要素:首先是可用性,再者要求更高的性能,并且要求更好的用戶體驗。百度的CDN平臺在內部一直承載著搜索業務、圖片業務以及網盤類型的業務,即能滿足搜索類型業務極其嚴格的可以性和質量要求,也能滿足網盤對存儲容量和承載能力的嚴格要求。
 
在穩定性方面,百度在做CDN節點選擇的時候會做非常嚴格的節點準入。實際上在運營商不同層級的節點上CDN質量差別非常大,而且即便是一個層級上的節點,還是有很大差別。百度還建立了全國質量感知網絡,通過建設全國監控網,通過不同的維度監控業務問題,比如服務端、客戶端、第三方監測等等。每天通過千億級PV在服務器后端發現問題,也可以通過百度做業務打點進行錯誤檢測。通過這樣的方式可以比較實時發現問題在哪兒然后做及時的調度切換。
 
CDN是一個重度依賴硬盤和SSD的服務,對硬盤健康性的把握直接影響CDN的服務質量和可用性。一個CDN節點,當服務器越少的時候,一塊硬盤出現質量問題如果沒有及時發現,所導致影響就越大,很可能造成一個節點百分之零點幾的可用性影響,這對一個超過4個9可用性的cdn平臺是不可接受的。百度云劉寧總監介紹道:百度采用監控故障扇區、磁頭馬達等硬件錯誤、設備報錯、設備文件不可訪問、進程D狀態、盤符缺失、SmartFail等數據,運用GBDT(Gradient Boosting Decision Tree)、SVM等算法 + 神經網絡構建故障預測模型,不僅可以做到故障不漏發現,還可提前48小時預測故障,準確率>90%,一旦預測到磁盤故障將要發生,會提前遷移盤上的熱點數據,同時提前剔除故障磁盤,并自動報修。
 
在性能方面,一方面從網絡以及節點的布局設計上考慮,在運營商骨干節點上建立了大量的超級節點,單個節點存儲超級結點可以達到3個P的存儲,有助于緩存持久化。同時單個節點帶寬達到160G或者更高的級別的時候就可以應對云時代業務中很多突發、攻擊,應對較為復雜的情況。這樣的結構超級節點加上更廣泛覆蓋的邊緣節點,可以提升命中率。另外還在自研的負載均衡、DNS、自研交換機上做了大量的優化工作,百度在負載均衡上基于DBDK開發了40G單機能力的負載均衡,它可以幫助百度很容易設計建設一些超級節點。
 
在速度優化方面,百度云做了非常多調優。一方面是通過節點的覆蓋,通過精準的CDN角度302調度,同時在算法上做了大量工作。尤其在協議棧的優化上,在去年一年就線上迭代了近100個版本,使得協議棧的擁塞算法的性能大幅超過標準cubic以及google BBR在internet上的表現。
 
百度云的獨特優勢在于以下幾點:1、質量感知:百度用戶基數大、使用密集、質量數據實時、細膩,基于訪問質量的自動實時調度。2、大數據:服務器故障大數據,硬盤故障預測并自動踢出,杜絕帶病運行。3、骨干節點:運營商骨干節點數100+,邊緣節點200+,三級節點緩存,4、BGP接入:BGP接入超過30家運營商。5、節點測試:嚴格的節點準入測試。
 
百度云在做各方面技術的打磨、產品的打磨的時候,更多是希望給用戶提供更好的產品和解決方案以及更好的性能。
 
百度云的解決方案
 
1、安全解決方案
 
演講中,劉寧跟大家分享了幾個百度的解決方案。整個中國的互聯網劫持非常嚴重,通常業務可以達到1%以上的劫持率,所以搜索業務前幾年就開始做全站的切換,百度在很早就開始做全站的HTTPS的切換。在這個過程中,一方面SRE團隊做了SSL接入層面優化,另一方面百度也開發了SSL offload異步集群,通過硬件加速的集群降低性能開銷,最終達到了理想的效果。百度能夠提供證書托管服務業、Keyless的https服務,同時也提供客戶httpDNS服務解決在DNS請求方面的劫持。
  
2、存儲分發方案
  
百度在提供CDN分發的同時也提供了很完整的存儲分發解決方案。百度的存儲分發解決方案是基于網盤近些年產品的積累和技術的打磨,百度網盤實際上是為解決過億用戶千PB的存儲問題。百度云的存儲方案給用戶提供數據的上傳、備份、存儲和處理的工作,用戶可以簡單的開啟其數據分發同時進行智能數據分級,大規模降低用戶存儲的成本。
  
3、P2P加速解決方案
  
P2P加速解決方案能夠節約30%帶寬費用,降低企業成本。體驗:用戶體驗好,卡頓比小于5%,首畫面時間小于1s;SDK:支持多平臺的SDK,資源占用少,豐富的控制接口;分享率:全天分享率大于35%,熱門文件的分享率達到80%以上;成本:降低30%以上。
  
4、視頻解決方案
 
百度的視頻云解決方案既提供基礎視頻云服務,也提供基于百度深度學習算法、百度大腦AI的能力,同時提供百度大數據支撐也幫助客戶建設視頻索引系統、視頻搜索系統。百度的視頻基礎云是基于百度自研的視頻點播VOD及視頻直播系統研發的,百度在視頻點播、直播上做了大量優化工作,從推流、拖流到源站,整個鏈路上沒有采用開源的方案,而是采取百度自己的私有協議做了大量的優化工作。百度視頻直播云在1-3毫秒延時的情況下可以提供3%以內的卡頓率。百度的視頻點播云一方面為客戶提供視頻播放、視頻分發網絡、轉碼以及存儲,另一方面直播平臺也給用戶提供單向的LSS直播以及雙向的互動直播,還可以做直播錄制。
 
百度的視頻基礎云背靠百度AI和大數據,致力于給用戶提供精準的內容理解。百度在內容審核方面可以給用戶提供非常高準召率的色恐的審核,包括人物的審核,政治敏感度人物的審核,版權審核、播控審核、智能縮略圖、字幕的生成等等。,利用視頻AI提供的視頻結構化標簽,結合百度視頻大數據的能力可以幫助用戶快速構建起視頻推薦系統以及視頻內容的索引系統。如果用戶沒有很好的用戶畫像,百度大數據也會為其提供用戶畫像的冷啟動,從而快速構建他的視頻推薦系統,建設用戶視頻模型及視頻特征模型。
 
關于在內容生產方面百度可以幫用戶做什么,劉寧答道一方面是用戶的生產輔助,比如長精彩片段的提取、字幕的輔助生成,百度視頻結構化標簽的準召率非常高,通常的結構化標注范圍比較少、標簽的維度也比較少,但是用百度的AI則可以做到非常豐富的標簽。
 
在視頻流量方面,百度竭力幫助用戶解決兩個關鍵的問題:一個人找視頻的場景,另一個是視頻找人的場景。人找視頻場景通常是廣電側的場景,可以結合視頻的輸出和百度搜索幫助用戶快速構建起站內搜索能力;視頻的推薦主要側重于UGC的場景,在視頻內容模型和用戶行為上幫助用戶快速構建起站內更為精準的推薦。
 
用戶還可以結合百度的百家號和百度視頻提供更好的內容的曝光。在營銷方面可以幫助UP主以及內容生產方快速建立起來粉絲和輿情管理、用戶畫像。比如一個UP主肯定非常想關注到他所有的粉絲是什么樣的年齡群體、年齡段,什么樣的職業背景、什么樣的家庭背景,更喜歡什么方面的內容,這樣才有助于指導UP主生產內容。在視頻流量變現方面,一方面百度云可以幫助用戶快速搭建廣告平臺,另一方面也可以通過視頻DSP、聯盟視頻廣告快速幫助用戶實現變現。
 
最后劉寧建議大家更多關注ai.baidu.com、cloud.baidu.com,網站發布有很多關于智能視頻和百度云CDN產品動態的信息。

責任編輯:王剛

相關推薦

CDN讓網絡訪問體驗日趨完美

近日,艾肯家電網簽約國內知名的CDN網站加速服務提供商北京快網,北京快網將為艾肯家電網提供提全站CDN加速服務。記者了解到,目前國內比較大的門戶網站為現實網站的高速訪問,早已使用了CDN網絡加速。目前,包括騰訊、新浪、搜狐、網易、酷六、紅袖添香等眾多網站都采用了北京快網的CDN網絡加速服務這一服務。據《中國互聯網年度綜合報告2009-2011》數據顯示,預計至2011年互聯網市場規模將達到1300億,互聯網總用戶數將達到6億。網民數量的持續提升同時也讓互聯網服務發展如火如荼,視頻、SNS、垂直網站等新興網站層出不窮,在帶來全新商機的同時,也讓互聯網帶寬、服務器等資源捉襟見肘。而CDN服務提供商

傳雅虎董事會成員肯尼有意競選CEO

9月29日消息,據國外媒體報道,雅虎董事會成員、國際上最大的CDN服務商Akamai總裁大衛·肯尼(DavidKenny)公開表示有意競選雅虎CEO。國際上最大的CDN服務商Akamai總裁大衛·肯尼知情人士透露,肯尼目前還在管理Akamai的業務,但確定要公開競選雅虎CEO。該人認為,肯尼對雅虎內部發生的一切非常清楚,知道自己在干什么。昨天,肯尼曾與雅虎產品團隊工作人員進行數小時長談。近日,他還曾與包括私募公司在內的雅虎投資方、股東交換了意見。某科技媒體認為,肯尼適宜擔

優酷數據中心:要“優”不要“酷”

提起優酷,喜歡看網上視頻的人大概沒有不知道的。創辦于2006年的優酷,因著“快者為王”的產品理念,以“快速播放,快速發布,快速搜索”的特性,滿足了互聯網用戶日益增長的多元化互動需求,從而成為國內視頻網站中的領軍企業。支持優酷實現快速、優質用戶體驗的,是優酷背后強大的數據中心和IT技術能力。據優酷CTO姚鍵介紹,優酷每年的數據增長率大概都在50%。為了應對不斷增長的巨大流量帶來挑戰,2010年,優酷對位于北京的主數據中心進行了改造。簡化的二層網絡姚鍵表示,由于優酷提供的視頻業務對網絡設備提出了時延小、可大規模擴展的要求,因此對網絡交換設備的選型十分重要。考慮到主數據中心的戰略地位,網絡規劃設計需

烽火通信開拓電信CDN運營新藍海

電信CDN飛速發展 隨著三網融合的進一步深化,作為三網融合試點中較為明晰的業務種類,IPTV業務得到了極大的發展。最新數據顯...

主站蜘蛛池模板: 汉寿县| 长春市| 子长县| 石柱| 德兴市| 贵德县| 丽水市| 凤庆县| 林甸县| 海晏县| 聂拉木县| 上饶市| 凤翔县| 青州市| 临泉县| 博客| 遂溪县| 连城县| 博乐市| 永胜县| 桂平市| 原阳县| 临沧市| 稻城县| 剑河县| 集贤县| 池州市| 长乐市| 潼关县| 通海县| 萨迦县| 西乡县| 额济纳旗| 瑞昌市| 平塘县| 图木舒克市| 余干县| 安庆市| 长沙市| 遂川县| 常熟市|