Web Audio浏览器采集麦克风音频数据怎么实现(audio,web,开发技术)

时间:2024-05-03 14:31:05 作者 : 石家庄SEO 分类 : 开发技术
  • TAG :

实现思路

我们仍然先介绍整体思路。采集音频,首先我们通过navigator.mediaDevices.getUserMedia方法来获取麦克风并录制声音。(navigator是浏览器NavigatorID标准接口的一种实现,可以用它来查询一些关于运行当前脚本的应用程序的相关信息。这里我们不多讨论这个对象,只介绍如何借助它录制音频)getUserMedia录制声音可以获取到音频流。然后我们通过Web Audio相关Api将音频流转化出实时的音频数据。最后通过canvas将实时的音频数据绘制成图谱,通过反复这个过程,实现动态绘制实时图谱的效果。整体的流程,如下图:

Web Audio浏览器采集麦克风音频数据怎么实现

获取麦克风权限,录制声音

浏览器的安全策略规定,navigator.mediaDevices.getUserMedia方法只能在https协议或者localhost域名下才有效。所以这里我们先用node搭建一个极简版的本地web服务器,再获取麦克风权限和录制声音。

//server.jsconsthttp=require('http');constpath=require('path');constfs=require('fs');http.createServer((request,response)=>{//请求体console.log(newDate(),':',JSON.stringify(request));//需要加载的html文件constfile=path.resolve(__dirname,'./demo2.html');//判断文件是否存在fs.exists(file,exists=>{if(!exists)console.log('文件不存在,沙雕!');else{response.writeHeader(200,{"Content-Type":"text/html"});response.end(fs.readFileSync(file,'utf-8'));}});}).listen(8090);//监听8090端口/**demo2.html*获取麦克风并录制声音*/letaudioCtx=null;//音频上下文letsource=null;//音频源letaudioStream=null;//录音产生的音频流letanalyserNode=null;//用于分析音频实时数据的节点letanimationFrame=null;//定时器functionrecordSound(){navigator.mediaDevices.getUserMedia({'audio':true}).then(initAudioData).catch(e=>{console.log('出问题了,沙雕:',e);});}//停止录制functionstopRecord(){//关闭麦克风consttracks=audioStream.getAudioTracks();for(leti=0,len=tracks.length;i<len;i++){tracks[i].stop();}//断开音频节点analyserNode.disconnect();source.disconnect();analyserNode=null;source=null;//清除定时器clearInterval(animationFrame);}//事件绑定document.querySelector('#record').onclick=recordSound;document.querySelector('#stop').onclick=stopRecord;

利用Web Audio Api 处理音频流数据

获取到音频流之后,我们通过音频上下文AudioContext,创建音频源。这里选择MediaStreamAudioSourceNode,它接收一个MediaStream对象来创建音频源。 然后我们在音频源和destination中间插入一个音频节点,用来获取及处理音频数据,进而利用数据绘制出波形图。这里选择AnalyserNode,当然像ScriptProcessorNode和AudioWorkletNode节点也能够实现获取和处理实时音频数据,具体可以参考相关Api。

//音频数据处理functioninitAudioData(stream){audioStream=stream;//创建音频上下文audioCtx=new(window.AudioContext||window.webkitAudioContext)();//创建音频源source=audioCtx.createMediaStreamSource(audioStream);//创建音频分析节点analyserNode=audioCtx.createAnalyser();//fftSize决定了能够获取到的音频数据的数量analyserNode.fftSize=4096;//音频源连接至analyserNodesource.connect(analyserNode);//analyserNode再连接至扬声器播放analyserNode.connect(audioCtx.destination);//简单用定时器来绘制波形图,当然也可以用requestAnimationFrame来以屏幕刷新的评率来反复执行绘制函数animateFrame=setInterval(drawWaver,60);}

实时获取音频数据,绘制波形图

AnalyserNode创建之后,你可以制定长度,来实时获取当前时间点的音频时域数据,然后通过定时器或者requestAnimationFrame的回调来反复获取数据、执行绘制函数来达成动态波形图的效果。绘制方式,同样是通过一个Float32Array数组对象来接收音频时域数据,(数值范围在-1到1之间)然后对数据进行采样,这里我们每12条数据,取一个最大值一个最小值来绘制图形。

//绘制图形functiondrawWaver(){constoriginData=newFloat32Array(analyserNode.fftSize);constpositives=[];constnegatives=[];//获取当前的实时音频数据analyserNode.getFloatTimeDomainData(originData);//每12位数据取一个最大值一个最小值4096/12=341.3333for(leti=0;i<341;i++){lettemp=originData.slice(i*12,(i+1)*12);positives.push(Math.max.apply(null,temp));negatives.push(Math.min.apply(null,temp));}//创建canvas上下文letcanvas=document.querySelector('#canvas');if(canvas.getContext){letctx=canvas.getContext('2d');canvas.width=positives.length*4;letx=0;lety=100;ctx.fillStyle='#fa541c';//canvas高度200,横坐标在canvas中点100px的位置,横坐标上方绘制正数据,下方绘制负数据for(letk=0;k<positives.length;k++){//每个矩形宽3px,间隔1px,图形总长度即为length*4ctx.fillRect(x+4*k,y-(100*positives[k]),3,100*positives[k]);ctx.fillRect(x+4*k,100,3,100*Math.abs(negatives[k]));}}}

这样,简单的音频采集以及实时图谱的绘制就完成了。

 </div> <div class="zixun-tj-product adv-bottom"></div> </div> </div> <div class="prve-next-news">
本文:Web Audio浏览器采集麦克风音频数据怎么实现的详细内容,希望对您有所帮助,信息来源于网络。
上一篇:如何理解C++各种操作的效率下一篇:

7 人围观 / 0 条评论 ↓快速评论↓

(必须)

(必须,保密)

阿狸1 阿狸2 阿狸3 阿狸4 阿狸5 阿狸6 阿狸7 阿狸8 阿狸9 阿狸10 阿狸11 阿狸12 阿狸13 阿狸14 阿狸15 阿狸16 阿狸17 阿狸18