Livello di attività del microfono di WebRTC MediaStream

Question

Desidero qualche consiglio su come ottenere il livello di attività del microfono di un oggetto audio MediaStreamTrack javascript in Chrome/Canary. L'oggetto MediaStreamTrack è una traccia audio di MediaStream restituita da getUserMedia, come parte dell'API javascript WebRTC.

Answer 1

Quello che stai cercando è webkitAudioContext e il suo metodo createMediaStreamSource.

Ecco un esempio di codice che disegna barra verde di agire come un VU meter:

navigator.webkitGetUserMedia({audio:true, video:true}, function(stream){ 
    audioContext = new webkitAudioContext(); 
    analyser = audioContext.createAnalyser(); 
    microphone = audioContext.createMediaStreamSource(stream); 
    javascriptNode = audioContext.createJavaScriptNode(2048, 1, 1); 

    analyser.smoothingTimeConstant = 0.3; 
    analyser.fftSize = 1024; 

    microphone.connect(analyser); 
    analyser.connect(javascriptNode); 
    javascriptNode.connect(audioContext.destination); 

    canvasContext = $("#canvas")[0].getContext("2d"); 

    javascriptNode.onaudioprocess = function() { 
     var array = new Uint8Array(analyser.frequencyBinCount); 
     analyser.getByteFrequencyData(array); 
     var values = 0; 

     var length = array.length; 
     for (var i = 0; i < length; i++) { 
      values += array[i]; 
     } 

     var average = values/length; 
     canvasContext.clearRect(0, 0, 60, 130); 
     canvasContext.fillStyle = '#00ff00'; 
     canvasContext.fillRect(0,130-average,25,130); 
    } 

} 

More details about AudioContext

Answer 2

Quando microfono ha audio barra verde su e giù molto bello:

<script type="text/javascript"> 
navigator.webkitGetUserMedia({audio:true, video:true}, function(stream){ 
    // audioContext = new webkitAudioContext(); deprecated OLD!! 
    audioContext = new AudioContext(); // NEW!! 
    analyser = audioContext.createAnalyser(); 
    microphone = audioContext.createMediaStreamSource(stream); 
    javascriptNode = audioContext.createJavaScriptNode(2048, 1, 1); 

    analyser.smoothingTimeConstant = 0.3; 
    analyser.fftSize = 1024; 

    microphone.connect(analyser); 
    analyser.connect(javascriptNode); 
    javascriptNode.connect(audioContext.destination); 

    //canvasContext = $("#canvas")[0].getContext("2d"); 
    canvasContext = document.getElementById("test"); 
    canvasContext= canvasContext.getContext("2d"); 

    javascriptNode.onaudioprocess = function() { 
     var array = new Uint8Array(analyser.frequencyBinCount); 
     analyser.getByteFrequencyData(array); 
     var values = 0; 

     var length = array.length; 
     for (var i = 0; i < length; i++) { 
      values += array[i]; 
     } 

     var average = values/length; 
     canvasContext.clearRect(0, 0, 60, 130); 
     canvasContext.fillStyle = '#00ff00'; 
     canvasContext.fillRect(0,130-average,25,130); 
    } 

} 
); 
</script> 
<canvas id="test" style="background-color: black;"></canvas> 

Answer 3

Ho apportato alcune modifiche al codice dalla prima risposta. Ho anche aggiunto:

window.AudioContext = window.AudioContext || window.webkitAudioContext; 
navigator.getUserMedia = navigator.webkitGetUserMedia || navigator.mozGetUserMedia; 

Così ora funziona su Chrome 39 e Firefox 34.

ecco un violino: http://jsfiddle.net/elshnkhll/p07e5vcq/