24

हम वेबसाइट पर रीयल टाइम वीडियो दिखाने के लिए एमएसई (मीडिया स्रोत एक्सटेंशन) का उपयोग करने की कोशिश कर रहे हैं। हम websocket पर फ्रेम भेज रहे हैं और विलंबता को कम रखने के लिए हमारी सबसे कठिन कोशिश कर रहे हैं। हमारा वर्तमान प्रोटोटाइप आईई, एज, क्रोम, सफारी इत्यादि में बहुत अच्छी तरह से स्ट्रीमिंग कर रहा है हमारे पास यह मुद्दा है कि आईई और एज वीडियो चलाने से पहले 3-5 सेकंड बफरिंग पर जोर देते हैं। यह हमारे उपयोग मामले (सुरक्षा कैमरों से लाइव वीडियो) में स्वीकार्य नहीं है। हम सोच रहे हैं कि कुछ संपत्ति या समान है (हमने प्रीलोड = किसी को सफलता के बिना सेट करने की कोशिश की है) जो इस बफरिंग को हटा देता है? अन्य सभी ब्राउज़र खुशी से खेलना शुरू करते हैं जब पहला फ्रेम स्रोत बफर में जोड़ा जाता है, और हम आईई/एज से वही व्यवहार चाहते हैं। क्या कोई अन्य कामकाज है जो आप हमारे लिए सुझा सकते हैं?मीडिया स्रोत एक्सटेंशन का उपयोग कर आईई/एज में वीडियो बफरिंग

फ्रेम ISO BMFF format

यहाँ में हैं एक reproducing example मैं पैदा की है कि पहली फ्रेम वीडियो में जोड़ा जाता है-समय उपायों playing.It एक WebSocket से अधिक पहुंचने डेटा धोखा करने के लिए एक अंतराल का उपयोग करता है शुरू होता है।

परिणाम:

Browser  Delay(ms) 
----------------------- 
Chrome:   ~300 
Safari @ Mac:  ~7 
Chrome @ Android: ~30 
IE11 @ Win10: ~3200 
Edge:   ~3200 

Here mp4 फ़ाइल, यदि आप इसे जांच करने के लिए चाहते हैं।

+1

उदाहरण लिंक 404 – totaam

+0

@totaam मैंने फ़ाइलों को Google ड्राइव से github में स्थानांतरित कर दिया है और लिंक अपडेट किए हैं। यह अब काम कर रहा है – oskbor

उत्तर

7

जब आप IE या Edge पर वीडियो की सेवा करते हैं, तो निम्न जावास्क्रिप्ट का उपयोग करें। यह मेरे लिए काम किया। के सरलीकृत संस्करण के रूप में Here it is in GitHub। मेरे कंप्यूटर पर, वीडियो लगभग तुरंत बजाता है।

  • जीपीएसी इंस्टॉलर here डाउनलोड करें।
  • इसे चलाएं और mp4box इंस्टॉल करें।
  • भागो mp4box -dash 10000 -frag 1000 -rap path\to\ie_5s.mp4

अब आप अपने मूल .mp4 के साथ फाइलों का एक समूह होगा।

ie_5s.mp4 
ie_5s_dash.mpd 
ie_5s_dashinit.mp4 
out_ie_5s.mp4 

एक .xml फाइल करने के लिए .mpd फ़ाइल का नाम बदलें।

फिर एक नया .html फ़ाइल एक ही निर्देशिका बनाएं। पेस्ट करें निम्नलिखित कोड:

<!DOCTYPE html> 
<html> 
<!-- Media streaming example 
    Reads an .mpd file created using mp4box and plays the file 
--> 
<head> 
    <meta charset="utf-8" /> 
    <title>Media streaming example</title> 
</head> 
<body> 
    <input type="text" id="filename" value="ie_5s_dash.xml" /> 
    <button id="load">Play</button> 
    <br /> 
    <video id="myVideo" autoplay="autoplay">No video available</video> 
    <script src="index.js"></script> 
</body> 
</html> 

इसके अलावा एक ही निर्देशिका में एक नया .js फ़ाइल बनाएँ।

/*globals window, console, XMLHttpRequest, document, Uint8Array, DOMParser, URL*/ 

(function() { /* code */ 

    'use strict'; 

    // Global Parameters from .mpd file 
    var file; // MP4 file 
    var width; // Native width and height 
    var height; 

    // Elements 
    var videoElement = document.getElementById('myVideo'); 
    var playButton = document.getElementById("load"); 
    videoElement.poster = "poster.png"; 

    // Description of initialization segment, and approx segment lengths 
    var initialization; 

    // Video parameters 
    var bandwidth; // bitrate of video 

    // Parameters to drive segment loop 
    var index = 0; // Segment to get 
    var segments; 

    // Source and buffers 
    var mediaSource; 
    var videoSource; 

    // Parameters to drive fetch loop 
    var segCheck; 
    var lastTime = 0; 
    var bufferUpdated = false; 

    // Flags to keep things going 
    var lastMpd = ""; 
    var requestId = 0; 

    // Logs messages to the console 
    function log(s) { 
     // send to console 
     // you can also substitute UI here 
     console.log(s); 
    } 

    // Clears the log 
    function clearLog() { 
     console.clear(); 
    } 

    function timeToDownload(range) { 
     var vidDur = range.split("-"); 
     // Time = size * 8/bitrate 
     return (((vidDur[1] - vidDur[0]) * 8)/bandwidth); 
    } 

    // Play segment plays a byte range (format nnnn-nnnnn) of a media file 
    function playSegment(range, url) { 
     var xhr = new XMLHttpRequest(); 
     if (range || url) { // Make sure we've got incoming params 
      xhr.open('GET', url); 
      xhr.setRequestHeader("Range", "bytes=" + range); 
      xhr.send(); 
      xhr.responseType = 'arraybuffer'; 
      try { 
       xhr.addEventListener("readystatechange", function() { 
        if (xhr.readyState === xhr.DONE) { //wait for video to load 
         // Calculate when to get next segment based on time of current one 
         segCheck = (timeToDownload(range) * 0.8).toFixed(3); // Use point eight as fudge factor 
         // Add received content to the buffer 
         try { 
          videoSource.appendBuffer(new Uint8Array(xhr.response)); 
         } catch (e) { 
          log('Exception while appending', e); 
         } 
        } 
       }, false); 
      } catch (e) { 
       log(e); 
       return; // No value for range 
      } 
     } 
    } 

    // Get video segments 
    function fileChecks() { 
     // If we're ok on the buffer, then continue 
     if (bufferUpdated === true) { 
      if (index < segments.length) { 
       // Loads next segment when time is close to the end of the last loaded segment 
       if ((videoElement.currentTime - lastTime) >= segCheck) { 
        playSegment(segments[index].getAttribute("mediaRange").toString(), file); 
        lastTime = videoElement.currentTime; 
        index++; 
       } 
      } else { 
       videoElement.removeEventListener("timeupdate", fileChecks, false); 
      } 
     } 
    } 

    // Play our file segments 
    function getStarted(url) { 

     // Start by loading the first segment of media 
     playSegment(segments[index].getAttribute("mediaRange").toString(), url); 

     // Display current index 
     index++; 

     // Continue in a loop where approximately every x seconds reload the buffer 
     videoElement.addEventListener("timeupdate", fileChecks, false); 

    } 

    function updateFunct() { 
     // This is a one shot function, when init segment finishes loading, 
     // update the buffer flag, call getStarted, and then remove this event. 
     bufferUpdated = true; 
     getStarted(file); // Get video playback started 
     // Now that video has started, remove the event listener 
     videoSource.removeEventListener("update", updateFunct); 
    } 

    // Load video's initialization segment 
    function initVideo(range, url) { 
     var xhr = new XMLHttpRequest(); 
     if (range || url) { // make sure we've got incoming params 

      // Set the desired range of bytes we want from the mp4 video file 
      xhr.open('GET', url); 
      xhr.setRequestHeader("Range", "bytes=" + range); 
      segCheck = (timeToDownload(range) * 0.8).toFixed(3); // use point eight as fudge factor 
      xhr.send(); 
      xhr.responseType = 'arraybuffer'; 
      try { 
       xhr.addEventListener("readystatechange", function() { 
        if (xhr.readyState === xhr.DONE) { // wait for video to load 
         // Add response to buffer 
         try { 
          videoSource.appendBuffer(new Uint8Array(xhr.response)); 
          // Wait for the update complete event before continuing 
          videoSource.addEventListener("update", updateFunct, false); 

         } catch (e) { 
          log('Exception while appending initialization content', e); 
         } 
        } 
       }, false); 
      } catch (e) { 
       log(e); 
      } 
     } else { 
      return; // No value for range or url 
     } 
    } 

    // Create mediaSource and initialize video 
    function setupVideo() { 
     clearLog(); // Clear console log 

     // Create the media source 
     if (window.MediaSource) { 
      mediaSource = new window.MediaSource(); 
     } else { 
      log("mediasource or syntax not supported"); 
      return; 
     } 
     var url = URL.createObjectURL(mediaSource); 
     videoElement.pause(); 
     videoElement.src = url; 
     videoElement.width = width; 
     videoElement.height = height; 

     // Wait for event that tells us that our media source object is 
     // ready for a buffer to be added. 
     mediaSource.addEventListener('sourceopen', function (e) { 
      try { 
       videoSource = mediaSource.addSourceBuffer('video/mp4'); 
       initVideo(initialization, file); 
      } catch (ex) { 
       log('Exception calling addSourceBuffer for video', ex); 
       return; 
      } 
     }, false); 

     // Handler to switch button text to Play 
     videoElement.addEventListener("pause", function() { 
      playButton.innerText = "Play"; 
     }, false); 

     // Handler to switch button text to pause 
     videoElement.addEventListener("playing", function() { 
      playButton.innerText = "Pause"; 
     }, false); 
    } 

    // Retrieve parameters from our stored .mpd file 
    function getFileType(data) { 
     try { 
      file = data.querySelectorAll("BaseURL")[0].textContent.toString(); 
      var rep = data.querySelectorAll("Representation"); 
      width = rep[0].getAttribute("width"); 
      height = rep[0].getAttribute("height"); 
      bandwidth = rep[0].getAttribute("bandwidth"); 

      var ini = data.querySelectorAll("Initialization"); 
      initialization = ini[0].getAttribute("range"); 
      segments = data.querySelectorAll("SegmentURL"); 

     } catch (er) { 
      log(er); 
      return; 
     } 
    } 

    // Gets the mpd file and parses it 
    function getData(url) { 
     if (url !== "") { 
      var xhr = new XMLHttpRequest(); // Set up xhr request 
      xhr.open("GET", url, true); // Open the request 
      xhr.responseType = "text"; // Set the type of response expected 
      xhr.send(); 

      // Asynchronously wait for the data to return 
      xhr.onreadystatechange = function() { 
       if (xhr.readyState === xhr.DONE) { 
        var tempoutput = xhr.response; 
        var parser = new DOMParser(); // Create a parser object 

        // Create an xml document from the .mpd file for searching 
        var xmlData = parser.parseFromString(tempoutput, "text/xml", 0); 
        log("parsing mpd file"); 

        // Get and display the parameters of the .mpd file 
        getFileType(xmlData); 

        // Set up video object, buffers, etc 
        setupVideo(); 
       } 
      }; 

      // Report errors if they happen during xhr 
      xhr.addEventListener("error", function (e) { 
       log("Error: " + e + " Could not load url."); 
      }, false); 
     } 
    } 

    // Click event handler for load button 
    playButton.addEventListener("click", function() { 
     // If video is paused then check for file change 
     if (videoElement.paused === true) { 
      // Retrieve mpd file, and set up video 
      var curMpd = document.getElementById("filename").value; 
      // If current mpd file is different then last mpd file, load it. 
      if (curMpd !== lastMpd) { 
       // Cancel display of current video position 
       window.cancelAnimationFrame(requestId); 
       lastMpd = curMpd; 
       getData(curMpd); 
      } else { 
       // No change, just play 
       videoElement.play(); 
      } 
     } else { 
      // Video was playing, now pause it 
      videoElement.pause(); 
     } 
    }, false); 

    // Do a little trickery, start video when you click the video element 
    videoElement.addEventListener("click", function() { 
     playButton.click(); 
    }, false); 

    // Event handler for the video element errors 
    document.getElementById("myVideo").addEventListener("error", function (e) { 
     log("video error: " + e.message); 
    }, false); 

}()); 

जब मैं या वेब सर्वर से index.html फ़ाइल की सेवा एड्ज को आईई 11+ तुरन्त वीडियो प्रदर्शित करता है। अनुमति देने का समय और यदि आप रुचि रखते हैं, तो मैं आपके लिए देखने के लिए डेमो लाइव होस्ट करूंगा।

+2

हाय, मैंने अभी आपके उदाहरण को देखा है लेकिन आज इसे स्थापित करने के लिए समय नहीं है।चूंकि सभी सेगमेंट पहले से ही सर्वर पर हैं, इसलिए यह कारण नहीं है कि वीडियो बस खेलना शुरू कर देता है कि IE/Edge जल्दी से खेलना शुरू करने के लिए पर्याप्त बफर कर सकता है? मुझे क्या हो रहा है इसके बाद मुझे कठिन समय है इसलिए मैं गलत हो सकता हूं :) मेरे मामले में फ्रेम वास्तविक समय में वेबसाइकिल पर आ रहे हैं इसलिए सर्वर से लाने के लिए कोई भविष्य खंड नहीं है। – oskbor

+0

"... यह कारण नहीं है कि वीडियो बस खेलना शुरू कर देता है कि IE/Edge जल्दी से खेलना शुरू करने के लिए पर्याप्त बफर कर सकता है?" आप ठीक हो सकते हैं। हम्म। मैं इसे बहुत अच्छी तरह समझ नहीं पा रहा हूं। :) –

+0

"... मेरे मामले में फ्रेम वास्तविक समय में वेबसाइकिल पर आ रहे हैं ..." परीक्षण करने के लिए इसका एक उदाहरण होना अच्छा होगा। क्या आप अपने सेटअप को पुन: पेश करने के बारे में अधिक जानकारी पोस्ट कर सकते हैं। [पुनरुत्पादन उदाहरण] (https://ea7e83c432c066554d3ef3e6580aa1af9bd594a1.googledrive.com/host/0BwqnHXhKkJ7mfjF5clFzSUFSY3pjSzhxZlA0TnpIeEo2bHlaY2FZd3RhWDFHY1o2eXZsYXc/ie_5s_buffer.html) जो आपने पोस्ट किया है वह मेरे लिए किसी भी ब्राउज़र पर काम नहीं कर रहा है। मुझे लगता है कि आप क्या कह रहे हैं कि हमें एक एमपी 4 की बजाय लाइव वीडियो फ़ीड का उपयोग करने की आवश्यकता है। जिज्ञासा से, आपने एमपी 4 को पहली जगह क्यों पोस्ट किया? –

8

आईपी बफरिंग MP4 TRUN बॉक्स में नमूना अवधि को देखकर किया जाता है। आप नकली डेटा के ~ 5 सेकंड जोड़कर इसे हल कर सकते हैं और फिर वीडियो को शुरू करने के बाद इसे हटा सकते हैं।

+2

यह काम कर सकता है, लेकिन एक बहुत ही हैकी समाधान की तरह लगता है। हालांकि महान विचार! – oskbor

+2

क्या आपके पास कोई संदर्भ लिंक है? – aergistal

+2

नमूना अवधि TRUN बॉक्स में सेट की गई है: https://msdn.microsoft.com/en-us/library/ff469478.aspx – Lekoaf

संबंधित मुद्दे