用video標籤流式加載

video標籤

瀏覽器的video標籤一般是接收一個src屬性，而後瀏覽器就會根據這個src屬性來自動加載視頻。
這個過程是瀏覽器來加載video的。

這種方式有什麼問題嗎？

1. mp4文件不能流式加載
2. webm，flv，hls等格式兼容性問題
3. 播放器ui太醜，一些經常使用的功能都沒有
4. 清晰度切換，等一些操做須要重載視頻，比較慢並且還會黑屏
5. 沒法對視頻加密

請求video流視頻

咱們能夠經過設置responseType爲arraybuffer來獲取視頻流，也能夠經過range字段來獲取視頻流片斷。好比

let xhr = new window.XMLHttpRequest();
xhr.responseType = 'arraybuffer'
xhr.open('get', 'http://www.w3school.com.cn/i/movie.mp4')
xhr.responseType = 'arraybuffer';
// xhr.setRequestHeader('Range', `bytes=0-390625`)
xhr.onload = function () {
    if (xhr.status === 200 || xhr.status === 206) {
        console.log(xhr.response)
    }
}
xhr.send();

或者fetch的arrayBuffer方法返回視頻流。

fetch(videoUrl).then(function(response) {
       return response.arrayBuffer();
 })

獲取到的數據是什麼呢？二進制的視頻流。
獲取這個有什麼用呢？

video去播「流」

MediaSource

MediaSource簡稱mse，是h5的一個api，它容許經過js生成媒體流，讓瀏覽器播放。

使用

咱們經過 URL.createObjectURL來建立一個blob格式的視頻文件，來給video標籤播。
具體用法就是new MediaSource，而後根據這個MediaSource生成blob文件，而後向MediaSource中添加mime和視頻流。

<div class="a">
        <video id="video" controls preload="auto"></video>
    </div>
    <script>
        $(function() {
            var video = document.querySelector('#video');
            var mediaSource = new MediaSource();
            video.src = URL.createObjectURL(mediaSource);
            mediaSource.addEventListener('sourceopen', sourceOpen);

            function sourceOpen(e) {
                URL.revokeObjectURL(video.src);
                // 設置 媒體的編碼類型
                var mime = 'video/webm; codecs="vorbis,vp8"';
                var mediaSource = e.target;
                var sourceBuffer = mediaSource.addSourceBuffer(mime);
                var videoUrl = 'http://localhost:9090/examples/mp4/video.webm';
                fetch(videoUrl).then(function(response) {
                        console.log(response)
                        return response.arrayBuffer();
                    })
                    .then(function(arrayBuffer) {
                        sourceBuffer.addEventListener('updateend', function(e) {
                            if (!sourceBuffer.updating && mediaSource.readyState === 'open') {
                                mediaSource.endOfStream();
                                // 在數據請求完成後，咱們須要調用 endOfStream()。它會改變 MediaSource.readyState 爲 ended 而且觸發 sourceended 事件。
                                video.play().then(function() {}).catch(function(err) {
                                    console.log(err)
                                });
                            }
                        });
                        sourceBuffer.appendBuffer(arrayBuffer);
                    });
            }
        })
</script>

咱們的mine是什麼呢？
video/webm是視頻格式，codecs後面第一段是一些視頻編解碼的一些重要信息，諸如編碼方式、分辨率、幀率、碼率以及對解碼器解碼能力的要求。
第二段是關於音頻部分的信息。

生成這樣的一個video標籤。咱們如今繞過了瀏覽器直接去請求src這一步，ajax請求視頻流，而後咱們能夠對視頻流進行處理，直接操做視頻流實現咱們須要的各類功能。
可是對於mp4格式，是不支持流式加載的，因此只能經過咱們本身操做流來實現流式播放。

播放器

公司同事研發了一款開源播放器，https://github.com/bytedance/xgplayer ，西瓜視頻好幾千萬dau的產品實測。

播放器原理

它是利用了流式處理視頻源，不單單是簡單的請求流而後交給video標籤播放，它是請求視頻流而後用js解碼而後進行一些須要的操做，交給video播放。

爲何要用js解碼呢？

公司大部分視頻是mp4，怎麼讓mp4支持流播放呢？咱們把mp4的流拿過來，js解析出它的視頻信息，而後js轉換成支持視頻流的fmp4格式的文件。
它的優點是

1. 解決了chrome不支持hls格式的問題（還有各類不支持格式的問題），由於咱們是直接操做二進制視頻數據，因此不存在video標籤不支持的狀況。
2. 解決了切換清晰度從新刷新視頻的問題
3. 對於mp4文件快進操做進行最小化的請求加載，讓它支持流式加載。
4. 支持直播和彈幕

咱們直接操做的視頻流，因此在對視頻進行清晰度切換，或者快進的時候，咱們後計算當前時間的流，而後用js加載視頻的新的流，從而進行最快的加載和響應。