用技術提升美好事物發生的概率。Technologically, for greater probability to be happy

前言

只要在 HTML5 中使用過視頻播放的同學對 video 標簽一定不會陌生，不過很多同學只使用了 video 的基礎功能，實際上 video 擁有強大潛能的，只要姿勢正確就能讓其擁有超能力。不妨從下面幾個場景來逐漸了解下video 未曾被發掘的神秘空間：

• 清晰度無縫切換
• 節省視頻流量

清晰度無縫切換

點播領域里 mp4 是最普遍、兼容性最好的視頻容器，不過 mp4 也有它的局限性，比如常見的清晰度切換，我們是無法像youtube那樣做到無縫切換的。我們可以看下普通的mp4播放的網絡請求和youtube視頻播放的網絡請求的區別。

圖1.1 普通mp4的下載請求過程

圖1.2 Youtube視頻下載請求過程

這兩張圖不難看出，在默認情況下 mp4 使用一次 http 請求所有的視頻數據，Youtube 則分次請求。當然這個描述很不專業，但確實形象。造成這種差異的是 video 不支持流式的視頻數據，Youtube 采用的是流式的視頻容器 webm，而 mp4 是非流式的。那如何解釋清楚流式的視頻數據呢，從專業的角度三言兩語很難說清楚，但用大白話翻譯過來就是流式的視頻數據支持分段獨立播放，非流式的不可以。換句話說一個10M的視頻文件，流式的視頻可以把0?1M的數據請求回來單獨播放，但是非流式的不可以。

上面我們描述了視頻格式的不同，接下來我們要說的是第一張圖中的視頻加載是瀏覽器來控制的，通過給 video 的 src 屬性配置視頻地址，觸發播放之后瀏覽器就會開始下載了，JS干涉不了。而 Youtube 的視頻加載是通過JS來控制的，各位可以再次看下第二張圖的網絡請求類型：xhr，足以證明這一點。

上面兩點搞清楚之后我們就該說下清晰度切換的事情了。這個需求大家都不陌生，但是直接使用 mp4 格式做無縫清晰度切換，難度還挺大的。先解釋下“無縫清晰度切換”的概念：從播放一個分辨率的視頻到另一個分辨率且保證畫面、聲音不停頓的平滑切換過程。了解了這個概念，大家應該知道了用 video 無縫切換 mp4 有多難。一方面，video 是不支持流式的視頻格式的，一方面，video 的加載是不受JS控制的。通過切換 video 的 src 屬性，必然會導致畫面中斷、重新請求視頻數據等。有的同學想到說利用兩個 video 再結合 z-index 來搞，但是當你生成另一個video去加載視頻的時候，無法保證兩個畫面是嚴格一致的，即使將原來的畫面暫停到一個時刻，用另一個視頻通過 currentTime 屬性與之同步，切換仍然看到畫面閃爍，基本無法和 Youtube 無縫切換的體驗匹敵。而且還會造成更多流量的浪費，背后的原因大家可以研究下 mp4 容器和 webm 容器的異同，也可以看下視頻解碼相關的文章。

還有一種方法就是將 mp4 格式統統轉碼到流式的視頻格式比如 hls、webm 等。不過這種看上去可行的方式實際上會帶來很大的成本開銷，如將大量視頻做轉碼會消耗高昂的機器資源、雙倍存儲的費用、CDN的雙倍費用等等。其實我們也是在這種背景下研究出來新的技術問題解決清晰度無縫切換的。

首先，我們改變對 mp4 視頻的播放流程，不再直接使用 video 的 src 來播放，因為我們沒有任何可以操作的空間。video不僅支持 src 屬性還支持 Blob 對象，我們就是利用后者。播放的流程如下：

圖1.3 mp4 視頻新播放流程

1. 來請求 mp4 視頻數據，這樣可以結合視頻 Range 服務，做到精確加載。
2. 編寫解析器將加載回來的部分 mp4 視頻數據進行解復用
3. 將解復用的視頻數據轉成 fmp4 格式并傳遞給 MediaSource
4. 使用 video 進行解碼完成播放

然后在做清晰度切換的時候流程如下：

圖1.4 mp4視頻清晰度切換原理示意圖

1. 播放視頻A，過程同上
2. 在某個時刻，用戶切換到播放視頻B，首先解析B的索引文件（moov），反向計算mp4的range區間
3. 加載B的視頻區間數據
4. 解復用
5. 把數據轉換成fmp4格式并傳遞給MediaSource
6. 刪除A的部分Buffer
7. 在下一個關鍵幀自動完成畫質的切換

圖1.5 mp4視頻清晰度切換流程示意圖

這個過程看上去比較繁瑣，但是所有的操作都是在瀏覽器端完成，也就是說都是JS來實現的。這樣之前說的所有成本問題都不存在，還能做到youtube相同體驗的無縫切換。如果大家也想使用這個功能不需要自己再去實現一遍上述流程，可以使用如下代碼：

如果對這段代碼有什么疑惑，或者想深入了解下它背后是如何實現的，可以參考 Github：http://github.com/origin/bytedance/xgplayer 或 閱讀原文：http://techblog.toutiao.com/origin/

節省視頻流量

使用 video 的同學基本上都是這樣用的，如下：

1. 利用src屬性

2.利用source標簽

這樣就可以播放視頻了，不過前面我們講過這樣使用 video ，視頻的加載是受瀏覽器控制的，可以看下瀏覽器在視頻剛開始播放的時候下載了多少數據：

圖2.1 video默認下載截圖

我隨便找了個視頻，大家看下視頻總長度是 02:08,在播放到 00:05 的時候，瀏覽器已經下載到 01:30 了，如果用戶終止觀看，下載的視頻就這樣被浪費掉了。當然，如果不斷的 seek 也會造成較多的流量浪費。按照我們之前的統計在短視頻領域，用戶 seek 的頻率在 80%，所以這部分流量是可以節省掉的。具體原理如下:

圖2.2 播放器加載視頻原理

1. 設置每次加載的數據包大小
2. 設置預加載時長
3. 開啟加載隊列，完成第一次數據包下載，判斷緩沖時間和預加載時長是否滿足，不滿足請求下一個數據包

具體實現代碼如下：

這樣就實現了視頻在播放過程中永遠只預加載10秒的數據，進而保證節省流量。

擴展鏈接，了解超能力西瓜視頻是怎樣煉成的。