菜单

websocket探索其与语音、图片的力量

2019年2月9日 - 金沙前端

websocket探索其与语音、图片的能力

2015/12/26 · JavaScript
· 3 评论 ·
websocket

原文出处:
AlloyTeam   

说到websocket想比大家不会陌生,假设陌生的话也没提到,一句话概括

“WebSocket protocol
是HTML5一种新的说道。它完结了浏览器与服务器全双工通讯”

WebSocket相比较传统那么些服务器推技术简直好了太多,我们可以挥手向comet和长轮询这么些技能说拜拜啦,庆幸我们生活在具备HTML5的时日~

那篇著作大家将分三片段探索websocket

首先是websocket的广大使用,其次是一点一滴自己创立服务器端websocket,最后是重中之重介绍利用websocket制作的几个demo,传输图片和在线语音聊天室,let’s
go

一、websocket常见用法

那里介绍二种自己认为大规模的websocket完毕……(只顾:本文建立在node上下文环境

1、socket.io

先给demo

JavaScript

var http = require(‘http’); var io = require(‘socket.io’); var server =
http.createServer(function(req, res) { res.writeHeader(200,
{‘content-type’: ‘text/html;charset=”utf-8″‘}); res.end();
}).listen(8888); var socket =.io.listen(server);
socket.sockets.on(‘connection’, function(socket) { socket.emit(‘xxx’,
{options}); socket.on(‘xxx’, function(data) { // do someting }); });

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
var http = require(‘http’);
var io = require(‘socket.io’);
 
var server = http.createServer(function(req, res) {
    res.writeHeader(200, {‘content-type’: ‘text/html;charset="utf-8"’});
    res.end();
}).listen(8888);
 
var socket =.io.listen(server);
 
socket.sockets.on(‘connection’, function(socket) {
    socket.emit(‘xxx’, {options});
 
    socket.on(‘xxx’, function(data) {
        // do someting
    });
});

信任领悟websocket的同学不能不精通socket.io,因为socket.io太闻明了,也很棒,它本身对过期、握手等都做了处理。我猜想那也是兑现websocket使用最多的法子。socket.io最最最优异的一点就是优雅降级,当浏览器不匡助websocket时,它会在内部优雅降级为长轮询等,用户和开发者是不需求关怀具体落到实处的,很便利。

而是事情是有两面性的,socket.io因为它的宏观也带来了坑的地方,最要害的就是臃肿,它的包裹也给多少拉动了较多的报导冗余,而且优雅降级这一亮点,也陪同浏览器标准化的举行逐级失去了光辉

Chrome Supported in version 4+
Firefox Supported in version 4+
Internet Explorer Supported in version 10+
Opera Supported in version 10+
Safari Supported in version 5+

在此处不是指责说socket.io不佳,已经被淘汰了,而是有时候大家也足以考虑部分任何的落到实处~

 

2、http模块

恰恰说了socket.io臃肿,这现在就来说说便捷的,首先demo

JavaScript

var http = require(‘http’); var server = http.createServer();
server.on(‘upgrade’, function(req) { console.log(req.headers); });
server.listen(8888);

1
2
3
4
5
6
var http = require(‘http’);
var server = http.createServer();
server.on(‘upgrade’, function(req) {
console.log(req.headers);
});
server.listen(8888);

很粗略的贯彻,其实socket.io内部对websocket也是那般完毕的,可是后边帮大家封装了部分handle处理,那里大家也足以协调去丰盛,给出两张socket.io中的源码图

图片 1

图片 2

 

3、ws模块

后边有个例证会用到,那里就提一下,前边具体看~

 

二、自己完结一套server端websocket

刚巧说了三种普遍的websocket已毕方式,现在我们寻思,对于开发者来说

websocket相对于传统http数据交互格局以来,伸张了服务器推送的轩然大波,客户端接收到事件再拓展对应处理,开发起来差异并不是太大啊

那是因为这一个模块已经帮大家将数量帧解析那边的坑都填好了,第二有的我们将尝试自己打造一套简便的服务器端websocket模块

感谢次碳酸钴的琢磨协助,自身在此间那有些只是简短说下,假如对此有趣味好奇的请百度【web技术商讨所】

温馨做到服务器端websocket主要有两点,一个是应用net模块接受数据流,还有一个是相比较官方的帧结构图解析数据,已毕那两有些就曾经完毕了全体的底层工作

首先给一个客户端发送websocket握手报文的抓包内容

客户端代码很简短

JavaScript

ws = new WebSocket(“ws://127.0.0.1:8888”);

1
ws = new WebSocket("ws://127.0.0.1:8888");

图片 3

劳动器端要指向那些key验证,就是讲key加上一个特定的字符串后做五回sha1运算,将其结果转换为base64送重临

JavaScript

var crypto = require(‘crypto’); var WS =
‘258EAFA5-E914-47DA-95CA-C5AB0DC85B11’;
require(‘net’).createServer(function(o) { var key;
o.on(‘data’,function(e) { if(!key) { // 获取发送过来的KEY key =
e.toString().match(/Sec-WebSocket-Key: (.+)/)[1]; //
连接上WS这些字符串,并做三遍sha1运算,最后转换成Base64 key =
crypto.createHash(‘sha1’).update(key+WS).digest(‘base64’); //
输出再次回到给客户端的多少,那一个字段都是必须的 o.write(‘HTTP/1.1 101
Switching Protocols\r\n’); o.write(‘Upgrade: websocket\r\n’);
o.write(‘Connection: Upgrade\r\n’); // 这些字段带上服务器处理后的KEY
o.write(‘Sec-WebSocket-Accept: ‘+key+’\r\n’); //
输出空行,使HTTP头停止 o.write(‘\r\n’); } }); }).listen(8888);

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
var crypto = require(‘crypto’);
var WS = ‘258EAFA5-E914-47DA-95CA-C5AB0DC85B11’;
 
require(‘net’).createServer(function(o) {
var key;
o.on(‘data’,function(e) {
if(!key) {
// 获取发送过来的KEY
key = e.toString().match(/Sec-WebSocket-Key: (.+)/)[1];
// 连接上WS这个字符串,并做一次sha1运算,最后转换成Base64
key = crypto.createHash(‘sha1’).update(key+WS).digest(‘base64’);
// 输出返回给客户端的数据,这些字段都是必须的
o.write(‘HTTP/1.1 101 Switching Protocols\r\n’);
o.write(‘Upgrade: websocket\r\n’);
o.write(‘Connection: Upgrade\r\n’);
// 这个字段带上服务器处理后的KEY
o.write(‘Sec-WebSocket-Accept: ‘+key+’\r\n’);
// 输出空行,使HTTP头结束
o.write(‘\r\n’);
}
});
}).listen(8888);

那般握手部分就早已落成了,前面就是多少帧解析与转变的活了

先看下官方提供的帧结构示意图

图片 4

简单介绍下

FIN为是还是不是甘休的标志

RSV为留住空间,0

opcode标识数据类型,是或不是分片,是或不是二进制解析,心跳包等等

付给一张opcode对应图

图片 5

MASK是或不是利用掩码

Payload len和前面extend payload length表示数据长度,那些是最麻烦的

PayloadLen只有7位,换成无符号整型的话唯有0到127的取值,这么小的数值当然无法描述较大的多少,由此确定当数码长度小于或等于125时候它才作为数据长度的叙述,如若这几个值为126,则时候背后的四个字节来囤积数据长度,若是为127则用后边多少个字节来存储数据长度

Masking-key掩码

上边贴出解析数据帧的代码

JavaScript

function decodeDataFrame(e) { var i = 0, j,s, frame = { FIN: e[i]
>> 7, Opcode: e[i++] & 15, Mask: e[i] >> 7,
PayloadLength: e[i++] & 0x7F }; if(frame.PayloadLength === 126) {
frame.PayloadLength = (e[i++] << 8) + e[i++]; }
if(frame.PayloadLength === 127) { i += 4; frame.PayloadLength =
(e[i++] << 24) + (e[i++] << 16) + (e[i++] << 8)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
function decodeDataFrame(e) {
var i = 0,
j,s,
frame = {
FIN: e[i] >> 7,
Opcode: e[i++] & 15,
Mask: e[i] >> 7,
PayloadLength: e[i++] & 0x7F
};
 
if(frame.PayloadLength === 126) {
frame.PayloadLength = (e[i++] << 8) + e[i++];
}
 
if(frame.PayloadLength === 127) {
i += 4;
frame.PayloadLength = (e[i++] << 24) + (e[i++] << 16) + (e[i++] << 8) + e[i++];
}
 
if(frame.Mask) {
frame.MaskingKey = [e[i++], e[i++], e[i++], e[i++]];
 
for(j = 0, s = []; j < frame.PayloadLength; j++) {
s.push(e[i+j] ^ frame.MaskingKey[j%4]);
}
} else {
s = e.slice(i, i+frame.PayloadLength);
}
 
s = new Buffer(s);
 
if(frame.Opcode === 1) {
s = s.toString();
}
 
frame.PayloadData = s;
return frame;
}

接下来是生成数据帧的

JavaScript

function encodeDataFrame(e) { var s = [], o = new
Buffer(e.PayloadData), l = o.length; s.push((e.FIN << 7) +
e.Opcode); if(l < 126) { s.push(l); } else if(l < 0x10000) {
s.push(126, (l&0xFF00) >> 8, l&0xFF); } else { s.push(127, 0, 0,
0, 0, (l&0xFF000000) >> 24, (l&0xFF0000) >> 16, (l&0xFF00)
>> 8, l&0xFF); } return Buffer.concat([new Buffer(s), o]); }

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
function encodeDataFrame(e) {
var s = [],
o = new Buffer(e.PayloadData),
l = o.length;
 
s.push((e.FIN << 7) + e.Opcode);
 
if(l < 126) {
s.push(l);
} else if(l < 0x10000) {
s.push(126, (l&0xFF00) >> 8, l&0xFF);
} else {
s.push(127, 0, 0, 0, 0, (l&0xFF000000) >> 24, (l&0xFF0000) >> 16, (l&0xFF00) >> 8, l&0xFF);
}
 
return Buffer.concat([new Buffer(s), o]);
}

都是服从帧结构示意图上的去处理,在那边不细讲,小说主要在下部分,如果对那块感兴趣的话可以运动web技术讨论所~

 

三、websocket传输图片和websocket语音聊天室

正片环节到了,这篇小说最要害的或者彰显一下websocket的有的行使景况

1、传输图片

咱俩先研究传输图片的手续是何等,首先服务器收到到客户端请求,然后读取图片文件,将二进制数据转载给客户端,客户端如何处理?当然是运用FileReader对象了

先给客户端代码

JavaScript

var ws = new WebSocket(“ws://xxx.xxx.xxx.xxx:8888”); ws.onopen =
function(){ console.log(“握手成功”); }; ws.onmessage = function(e) { var
reader = new FileReader(); reader.onload = function(event) { var
contents = event.target.result; var a = new Image(); a.src = contents;
document.body.appendChild(a); } reader.readAsDataURL(e.data); };

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
var ws = new WebSocket("ws://xxx.xxx.xxx.xxx:8888");
 
ws.onopen = function(){
    console.log("握手成功");
};
 
ws.onmessage = function(e) {
    var reader = new FileReader();
    reader.onload = function(event) {
        var contents = event.target.result;
        var a = new Image();
        a.src = contents;
        document.body.appendChild(a);
    }
    reader.readAsDataURL(e.data);
};

接到到音信,然后readAsDataURL,直接将图纸base64添加到页面中

转到服务器端代码

JavaScript

fs.readdir(“skyland”, function(err, files) { if(err) { throw err; }
for(var i = 0; i < files.length; i++) { fs.readFile(‘skyland/’ +
files[i], function(err, data) { if(err) { throw err; }
o.write(encodeImgFrame(data)); }); } }); function encodeImgFrame(buf) {
var s = [], l = buf.length, ret = []; s.push((1 << 7) + 2);
if(l < 126) { s.push(l); } else if(l < 0x10000) { s.push(126,
(l&0xFF00) >> 8, l&0xFF); } else { s.push(127, 0, 0, 0, 0,
(l&0xFF000000) >> 24, (l&0xFF0000) >> 16, (l&0xFF00)
>> 8, l&0xFF); } return Buffer.concat([new Buffer(s), buf]); }

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
fs.readdir("skyland", function(err, files) {
if(err) {
throw err;
}
for(var i = 0; i < files.length; i++) {
fs.readFile(‘skyland/’ + files[i], function(err, data) {
if(err) {
throw err;
}
 
o.write(encodeImgFrame(data));
});
}
});
 
function encodeImgFrame(buf) {
var s = [],
l = buf.length,
ret = [];
 
s.push((1 << 7) + 2);
 
if(l < 126) {
s.push(l);
} else if(l < 0x10000) {
s.push(126, (l&0xFF00) >> 8, l&0xFF);
} else {
s.push(127, 0, 0, 0, 0, (l&0xFF000000) >> 24, (l&0xFF0000) >> 16, (l&0xFF00) >> 8, l&0xFF);
}
 
return Buffer.concat([new Buffer(s), buf]);
}

注意s.push((1 << 7) +
2)
这一句,那里相当间接把opcode写死了为2,对于Binary
Frame,那样客户端接收到数量是不会尝试举办toString的,否则会报错~

代码很简短,在此处向大家分享一下websocket传输图片的进程如何

测试很多张图片,总共8.24M

一般性静态资源服务器要求20s左右(服务器较远)

cdn需要2.8s左右

那大家的websocket格局呢??!

答案是同样须求20s左右,是还是不是很失望……速度就是慢在传输上,并不是服务器读取图片,本机上亦然的图纸资源,1s左右可以落成……那样看来数据流也不可以冲破距离的限制提升传输速度

上面我们来探望websocket的另一个用法~

 

用websocket搭建语音聊天室

先来打点一下口音聊天室的听从

用户进入频道随后从迈克风输入音频,然后发送给后台转载给频道里面的其别人,其外人接收到新闻举行播报

看起来困难在三个地点,首个是节奏的输入,第二是接受到数量流举行广播

先说音频的输入,那里运用了HTML5的getUserMedia方法,然而注意了,以此艺术上线是有大坑的,最终说,先贴代码

JavaScript

if (navigator.getUserMedia) { navigator.getUserMedia( { audio: true },
function (stream) { var rec = new SRecorder(stream); recorder = rec; })
}

1
2
3
4
5
6
7
8
if (navigator.getUserMedia) {
    navigator.getUserMedia(
        { audio: true },
        function (stream) {
            var rec = new SRecorder(stream);
            recorder = rec;
        })
}

先是个参数是{audio:
true},只启用音频,然后创造了一个SRecorder对象,后续的操作基本上都在那一个目的上展开。此时一经代码运行在地点的话浏览器应该提醒您是否启用Mike风输入,确定今后就开动了

接下去大家看下SRecorder构造函数是啥,给出首要的一对

JavaScript

var SRecorder = function(stream) { …… var context = new AudioContext();
var audioInput = context.createMediaStreamSource(stream); var recorder =
context.createScriptProcessor(4096, 1, 1); …… }

1
2
3
4
5
6
7
var SRecorder = function(stream) {
    ……
   var context = new AudioContext();
    var audioInput = context.createMediaStreamSource(stream);
    var recorder = context.createScriptProcessor(4096, 1, 1);
    ……
}

奥迪oContext是一个节奏上下文对象,有做过声音过滤处理的同窗应该精通“一段音频到达扬声器实行广播以前,半路对其进展阻挠,于是我们就获取了节奏数据了,那么些拦截工作是由window.奥迪(Audi)oContext来做的,我们富有对旋律的操作都根据那个目的”,大家能够通过奥迪(Audi)oContext成立不一样的奥迪oNode节点,然后添加滤镜播放特其余音响

录音原理一样,大家也急需走奥迪(Audi)oContext,不过多了一步对迈克风音频输入的接收上,而不是像以前处理音频一下用ajax请求音频的ArrayBuffer对象再decode,Mike风的承受需求用到createMediaStreamSource方法,注意这么些参数就是getUserMedia方法第四个参数的参数

再者说createScriptProcessor方法,它官方的分解是:

Creates a ScriptProcessorNode, which can be used for direct audio
processing via JavaScript.

——————

包罗下就是那些法子是利用JavaScript去处理音频采集操作

到头来到点子采集了!胜利就在面前!

接下去让我们把话筒的输入和拍子采集相连起来

JavaScript

audioInput.connect(recorder); recorder.connect(context.destination);

1
2
audioInput.connect(recorder);
recorder.connect(context.destination);

context.destination官方表明如下

The destination property of
the AudioContext interface
returns
an AudioDestinationNoderepresenting
the final destination of all audio in the context.

——————

context.destination重返代表在条件中的音频的尾声目标地。

好,到了那儿,大家还索要一个监听音频采集的风云

JavaScript

recorder.onaudioprocess = function (e) {
audioData.input(e.inputBuffer.getChannelData(0)); }

1
2
3
recorder.onaudioprocess = function (e) {
    audioData.input(e.inputBuffer.getChannelData(0));
}

audioData是一个对象,那几个是在网上找的,我就加了一个clear方法因为背后会用到,主要有万分encodeWAV方法很赞,别人进行了往往的韵律压缩和优化,那几个最后会陪伴完整的代码一起贴出来

此时一切用户进入频道随后从Mike风输入音频环节就已经形成啦,下边就该是向劳动器端发送音频流,稍微有点蛋疼的来了,刚才我们说了,websocket通过opcode分歧可以表示回去的数量是文本仍旧二进制数据,而我辈onaudioprocess中input进去的是数组,最后播放声音必要的是Blob,{type:
‘audio/wav’}的对象,那样大家就务要求在殡葬从前将数组转换成WAV的Blob,此时就用到了地点说的encodeWAV方法

服务器如同很粗略,只要转载就行了

当地测试确实能够,唯独天坑来了!将先后跑在服务器上时候调用getUserMedia方法提示我不可能不在一个安然无恙的环境,也就是急需https,那意味着ws也亟须换成wss……由此服务器代码就从不动用大家团结一心包裹的握手、解析和编码了,代码如下

JavaScript

var https = require(‘https’); var fs = require(‘fs’); var ws =
require(‘ws’); var userMap = Object.create(null); var options = { key:
fs.readFileSync(‘./privatekey.pem’), cert:
fs.readFileSync(‘./certificate.pem’) }; var server =
https.createServer(options, function(req, res) { res.writeHead({
‘Content-Type’ : ‘text/html’ }); fs.readFile(‘./testaudio.html’,
function(err, data) { if(err) { return ; } res.end(data); }); }); var
wss = new ws.Server({server: server}); wss.on(‘connection’, function(o)
{ o.on(‘message’, function(message) { if(message.indexOf(‘user’) === 0)
{ var user = message.split(‘:’)[1]; userMap[user] = o; } else {
for(var u in userMap) { userMap[u].send(message); } } }); });
server.listen(8888);

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
var https = require(‘https’);
var fs = require(‘fs’);
var ws = require(‘ws’);
var userMap = Object.create(null);
var options = {
    key: fs.readFileSync(‘./privatekey.pem’),
    cert: fs.readFileSync(‘./certificate.pem’)
};
var server = https.createServer(options, function(req, res) {
    res.writeHead({
        ‘Content-Type’ : ‘text/html’
    });
 
    fs.readFile(‘./testaudio.html’, function(err, data) {
        if(err) {
            return ;
        }
 
        res.end(data);
    });
});
 
var wss = new ws.Server({server: server});
 
wss.on(‘connection’, function(o) {
    o.on(‘message’, function(message) {
if(message.indexOf(‘user’) === 0) {
    var user = message.split(‘:’)[1];
    userMap[user] = o;
} else {
    for(var u in userMap) {
userMap[u].send(message);
    }
}
    });
});
 
server.listen(8888);

代码照旧很不难的,使用https模块,然后用了始于说的ws模块,userMap是仿照的频道,只兑现转载的基本功能

接纳ws模块是因为它万分https已毕wss实在是太有利了,和逻辑代码0争持

https的搭建在这边就不提了,首假使亟需私钥、CSR证书签名和证件文件,感兴趣的同窗可以了然下(可是不打听的话在现网环境也用持续getUserMedia……)

上边是总体的前端代码

JavaScript

var a = document.getElementById(‘a’); var b =
document.getElementById(‘b’); var c = document.getElementById(‘c’);
navigator.getUserMedia = navigator.getUserMedia ||
navigator.webkitGetUserMedia; var gRecorder = null; var audio =
document.querySelector(‘audio’); var door = false; var ws = null;
b.onclick = function() { if(a.value === ”) { alert(‘请输入用户名’);
return false; } if(!navigator.getUserMedia) {
alert(‘抱歉您的装置无罗马尼亚(România)语音聊天’); return false; }
SRecorder.get(function (rec) { gRecorder = rec; }); ws = new
WebSocket(“wss://x.x.x.x:8888”); ws.onopen = function() {
console.log(‘握手成功’); ws.send(‘user:’ + a.value); }; ws.onmessage =
function(e) { receive(e.data); }; document.onkeydown = function(e) {
if(e.keyCode === 65) { if(!door) { gRecorder.start(); door = true; } }
}; document.onkeyup = function(e) { if(e.keyCode === 65) { if(door) {
ws.send(gRecorder.getBlob()); gRecorder.clear(); gRecorder.stop(); door
= false; } } } } c.onclick = function() { if(ws) { ws.close(); } } var
SRecorder = function(stream) { config = {}; config.sampleBits =
config.smapleBits || 8; config.sampleRate = config.sampleRate || (44100
/ 6); var context = new 奥迪oContext(); var audioInput =
context.createMediaStreamSource(stream); var recorder =
context.createScriptProcessor(4096, 1, 1); var audioData = { size: 0
//录音文件长度 , buffer: [] //录音缓存 , inputSampleRate:
context.sampleRate //输入采样率 , inputSampleBits: 16 //输入采样数位 8,
16 , output萨姆pleRate: config.sampleRate //输出采样率 , oututSampleBits:
config.sampleBits //输出采样数位 8, 16 , clear: function() { this.buffer
= []; this.size = 0; } , input: function (data) { this.buffer.push(new
Float32Array(data)); this.size += data.length; } , compress: function ()
{ //合并压缩 //合并 var data = new Float32Array(this.size); var offset =
0; for (var i = 0; i < this.buffer.length; i++) {
data.set(this.buffer[i], offset); offset += this.buffer[i].length; }
//压缩 var compression = parseInt(this.inputSampleRate /
this.outputSampleRate); var length = data.length / compression; var
result = new Float32Array(length); var index = 0, j = 0; while (index
< length) { result[index] = data[j]; j += compression; index++; }
return result; } , encodeWAV: function () { var sampleRate =
Math.min(this.inputSampleRate, this.outputSampleRate); var sampleBits =
Math.min(this.inputSampleBits, this.oututSampleBits); var bytes =
this.compress(); var dataLength = bytes.length * (sampleBits / 8); var
buffer = new ArrayBuffer(44 + dataLength); var data = new
DataView(buffer); var channelCount = 1;//单声道 var offset = 0; var
writeString = function (str) { for (var i = 0; i < str.length; i++) {
data.setUint8(offset + i, str.charCodeAt(i)); } }; // 资源调换文件标识符
writeString(‘RIFF’); offset += 4; //
下个地方开头到文件尾总字节数,即文件大小-8 data.setUint32(offset, 36 +
dataLength, true); offset += 4; // WAV文件阐明 writeString(‘WAVE’);
offset += 4; // 波形格式标志 writeString(‘fmt ‘); offset += 4; //
过滤字节,一般为 0x10 = 16 data.setUint32(offset, 16, true); offset += 4;
// 格式种类 (PCM形式采样数据) data.setUint16(offset, 1, true); offset +=
2; // 通道数 data.setUint16(offset, channelCount, true); offset += 2; //
采样率,每秒样本数,表示每个通道的播放速度 data.setUint32(offset,
sampleRate, true); offset += 4; // 波形数据传输率 (每秒平均字节数)
单声道×每秒数据位数×每样本数据位/8 data.setUint32(offset, channelCount
* sampleRate * (sampleBits / 8), true); offset += 4; // 快数据调整数
采样三遍占用字节数 单声道×每样本的多少位数/8 data.setUint16(offset,
channelCount * (sampleBits / 8), true); offset += 2; // 每样本数量位数
data.setUint16(offset, sampleBits, true); offset += 2; // 数据标识符
writeString(‘data’); offset += 4; // 采样数据总数,即数据总大小-44
data.setUint32(offset, dataLength, true); offset += 4; // 写入采样数据
if (sampleBits === 8) { for (var i = 0; i < bytes.length; i++,
offset++) { var s = Math.max(-1, Math.min(1, bytes[i])); var val = s
< 0 ? s * 0x8000 : s * 0x7FFF; val = parseInt(255 / (65535 / (val +
32768))); data.setInt8(offset, val, true); } } else { for (var i = 0; i
< bytes.length; i++, offset += 2) { var s = Math.max(-1, Math.min(1,
bytes[i])); data.setInt16(offset, s < 0 ? s * 0x8000 : s *
0x7FFF, true); } } return new Blob([data], { type: ‘audio/wav’ }); }
}; this.start = function () { audioInput.connect(recorder);
recorder.connect(context.destination); } this.stop = function () {
recorder.disconnect(); } this.getBlob = function () { return
audioData.encodeWAV(); } this.clear = function() { audioData.clear(); }
recorder.onaudioprocess = function (e) {
audioData.input(e.inputBuffer.getChannelData(0)); } }; SRecorder.get =
function (callback) { if (callback) { if (navigator.getUserMedia) {
navigator.getUserMedia( { audio: true }, function (stream) { var rec =
new SRecorder(stream); callback(rec); }) } } } function receive(e) {
audio.src = window.URL.createObjectURL(e); }

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
var a = document.getElementById(‘a’);
var b = document.getElementById(‘b’);
var c = document.getElementById(‘c’);
 
navigator.getUserMedia = navigator.getUserMedia || navigator.webkitGetUserMedia;
 
var gRecorder = null;
var audio = document.querySelector(‘audio’);
var door = false;
var ws = null;
 
b.onclick = function() {
    if(a.value === ”) {
        alert(‘请输入用户名’);
        return false;
    }
    if(!navigator.getUserMedia) {
        alert(‘抱歉您的设备无法语音聊天’);
        return false;
    }
 
    SRecorder.get(function (rec) {
        gRecorder = rec;
    });
 
    ws = new WebSocket("wss://x.x.x.x:8888");
 
    ws.onopen = function() {
        console.log(‘握手成功’);
        ws.send(‘user:’ + a.value);
    };
 
    ws.onmessage = function(e) {
        receive(e.data);
    };
 
    document.onkeydown = function(e) {
        if(e.keyCode === 65) {
            if(!door) {
                gRecorder.start();
                door = true;
            }
        }
    };
 
    document.onkeyup = function(e) {
        if(e.keyCode === 65) {
            if(door) {
                ws.send(gRecorder.getBlob());
                gRecorder.clear();
                gRecorder.stop();
                door = false;
            }
        }
    }
}
 
c.onclick = function() {
    if(ws) {
        ws.close();
    }
}
 
var SRecorder = function(stream) {
    config = {};
 
    config.sampleBits = config.smapleBits || 8;
    config.sampleRate = config.sampleRate || (44100 / 6);
 
    var context = new AudioContext();
    var audioInput = context.createMediaStreamSource(stream);
    var recorder = context.createScriptProcessor(4096, 1, 1);
 
    var audioData = {
        size: 0          //录音文件长度
        , buffer: []     //录音缓存
        , inputSampleRate: context.sampleRate    //输入采样率
        , inputSampleBits: 16       //输入采样数位 8, 16
        , outputSampleRate: config.sampleRate    //输出采样率
        , oututSampleBits: config.sampleBits       //输出采样数位 8, 16
        , clear: function() {
            this.buffer = [];
            this.size = 0;
        }
        , input: function (data) {
            this.buffer.push(new Float32Array(data));
            this.size += data.length;
        }
        , compress: function () { //合并压缩
            //合并
            var data = new Float32Array(this.size);
            var offset = 0;
            for (var i = 0; i < this.buffer.length; i++) {
                data.set(this.buffer[i], offset);
                offset += this.buffer[i].length;
            }
            //压缩
            var compression = parseInt(this.inputSampleRate / this.outputSampleRate);
            var length = data.length / compression;
            var result = new Float32Array(length);
            var index = 0, j = 0;
            while (index < length) {
                result[index] = data[j];
                j += compression;
                index++;
            }
            return result;
        }
        , encodeWAV: function () {
            var sampleRate = Math.min(this.inputSampleRate, this.outputSampleRate);
            var sampleBits = Math.min(this.inputSampleBits, this.oututSampleBits);
            var bytes = this.compress();
            var dataLength = bytes.length * (sampleBits / 8);
            var buffer = new ArrayBuffer(44 + dataLength);
            var data = new DataView(buffer);
 
            var channelCount = 1;//单声道
            var offset = 0;
 
            var writeString = function (str) {
                for (var i = 0; i < str.length; i++) {
                    data.setUint8(offset + i, str.charCodeAt(i));
                }
            };
 
            // 资源交换文件标识符
            writeString(‘RIFF’); offset += 4;
            // 下个地址开始到文件尾总字节数,即文件大小-8
            data.setUint32(offset, 36 + dataLength, true); offset += 4;
            // WAV文件标志
            writeString(‘WAVE’); offset += 4;
            // 波形格式标志
            writeString(‘fmt ‘); offset += 4;
            // 过滤字节,一般为 0x10 = 16
            data.setUint32(offset, 16, true); offset += 4;
            // 格式类别 (PCM形式采样数据)
            data.setUint16(offset, 1, true); offset += 2;
            // 通道数
            data.setUint16(offset, channelCount, true); offset += 2;
            // 采样率,每秒样本数,表示每个通道的播放速度
            data.setUint32(offset, sampleRate, true); offset += 4;
            // 波形数据传输率 (每秒平均字节数) 单声道×每秒数据位数×每样本数据位/8
            data.setUint32(offset, channelCount * sampleRate * (sampleBits / 8), true); offset += 4;
            // 快数据调整数 采样一次占用字节数 单声道×每样本的数据位数/8
            data.setUint16(offset, channelCount * (sampleBits / 8), true); offset += 2;
            // 每样本数据位数
            data.setUint16(offset, sampleBits, true); offset += 2;
            // 数据标识符
            writeString(‘data’); offset += 4;
            // 采样数据总数,即数据总大小-44
            data.setUint32(offset, dataLength, true); offset += 4;
            // 写入采样数据
            if (sampleBits === 8) {
                for (var i = 0; i < bytes.length; i++, offset++) {
                    var s = Math.max(-1, Math.min(1, bytes[i]));
                    var val = s < 0 ? s * 0x8000 : s * 0x7FFF;
                    val = parseInt(255 / (65535 / (val + 32768)));
                    data.setInt8(offset, val, true);
                }
            } else {
                for (var i = 0; i < bytes.length; i++, offset += 2) {
                    var s = Math.max(-1, Math.min(1, bytes[i]));
                    data.setInt16(offset, s < 0 ? s * 0x8000 : s * 0x7FFF, true);
                }
            }
 
            return new Blob([data], { type: ‘audio/wav’ });
        }
    };
 
    this.start = function () {
        audioInput.connect(recorder);
        recorder.connect(context.destination);
    }
 
    this.stop = function () {
        recorder.disconnect();
    }
 
    this.getBlob = function () {
        return audioData.encodeWAV();
    }
 
    this.clear = function() {
        audioData.clear();
    }
 
    recorder.onaudioprocess = function (e) {
        audioData.input(e.inputBuffer.getChannelData(0));
    }
};
 
SRecorder.get = function (callback) {
    if (callback) {
        if (navigator.getUserMedia) {
            navigator.getUserMedia(
                { audio: true },
                function (stream) {
                    var rec = new SRecorder(stream);
                    callback(rec);
                })
        }
    }
}
 
function receive(e) {
    audio.src = window.URL.createObjectURL(e);
}

注意:按住a键说话,放开a键发送

和谐有品味不按键实时对讲,通过setInterval发送,但发现杂音有点重,效果不好,那一个需求encodeWAV再一层的包裹,多去除环境杂音的效劳,自己选择了尤其便民的按键说话的形式

 

那篇文章里第一展望了websocket的前景,然后根据标准大家和好尝试解析和转变数据帧,对websocket有了更深一步的摸底

末尾经过三个demo看到了websocket的潜力,关于语音聊天室的demo涉及的较广,没有接触过奥迪(Audi)oContext对象的同班最好先明白下奥迪(Audi)oContext

小说到此处就归西啦~有怎么样想法和题材欢迎大家指出来一起谈谈探索~

 

1 赞 11 收藏 3
评论

图片 6

初稿出处:
AlloyTeam   

原稿出处:
AlloyTeam   

原文出处:
AlloyTeam   

说到websocket想比我们不会陌生,即使陌生的话也没涉及,一句话概括

说到websocket想比我们不会陌生,即使陌生的话也没提到,一句话概括

说到websocket想比大家不会陌生,如若陌生的话也没提到,一句话概括

“WebSocket protocol
是HTML5一种新的协议。它已毕了浏览器与服务器全双工通讯”

“WebSocket protocol
是HTML5一种新的协商。它达成了浏览器与服务器全双工通讯”

“WebSocket protocol
是HTML5一种新的商议。它完结了浏览器与服务器全双工通讯”

WebSocket相比较传统这么些服务器推技术几乎好了太多,我们得以挥手向comet和长轮询那几个技能说拜拜啦,庆幸大家生活在具有HTML5的一世~

WebSocket相比较传统那一个服务器推技术大致好了太多,大家可以挥手向comet和长轮询那么些技能说拜拜啦,庆幸大家生存在颇具HTML5的一世~

WebSocket相比较传统那么些服务器推技术大约好了太多,大家能够挥手向comet和长轮询这个技巧说拜拜啦,庆幸大家生活在有着HTML5的时期~

这篇文章我们将分三有些探索websocket

那篇文章我们将分三局地探索websocket

那篇小说大家将分三部分探索websocket

首先是websocket的广泛使用,其次是一心自己创设服务器端websocket,最后是根本介绍利用websocket制作的四个demo,传输图片和在线语音聊天室,let’s
go

第一是websocket的常见使用,其次是完全自己创设服务器端websocket,最后是至关主要介绍利用websocket制作的八个demo,传输图片和在线语音聊天室,let’s
go

首先是websocket的宽广使用,其次是全然自己创制服务器端websocket,最后是首要介绍利用websocket制作的多个demo,传输图片和在线语音聊天室,let’s
go

一、websocket常见用法

一、websocket常见用法

一、websocket常见用法

那里介绍两种自我觉着大规模的websocket完成……(瞩目:本文建立在node上下文环境

那里介绍三种自我觉着大规模的websocket完毕……(留意:本文建立在node上下文环境

此处介绍两种自己认为大规模的websocket完结……(专注:本文建立在node上下文环境

1、socket.io

1、socket.io

1、socket.io

先给demo

先给demo

先给demo

JavaScript

JavaScript

JavaScript

var http = require(‘http’); var io = require(‘socket.io’); var server =
http.createServer(function(req, res) { res.writeHeader(200,
{‘content-type’: ‘text/html;charset=”utf-8″‘}); res.end();
}).listen(8888); var socket =.io.listen(server);
socket.sockets.on(‘connection’, function(socket) { socket.emit(‘xxx’,
{options}); socket.on(‘xxx’, function(data) { // do someting }); });

var http = require(‘http’); var io = require(‘socket.io’); var server =
http.createServer(function(req, res) { res.writeHeader(200,
{‘content-type’: ‘text/html;charset=”utf-8″‘}); res.end();
}).listen(8888); var socket =.io.listen(server);
socket.sockets.on(‘connection’, function(socket) { socket.emit(‘xxx’,
{options}); socket.on(‘xxx’, function(data) { // do someting }); });

var http = require(‘http’); var io = require(‘socket.io’); var server =
http.createServer(function(req, res) { res.writeHeader(200,
{‘content-type’: ‘text/html;charset=”utf-8″‘}); res.end();
}).listen(8888); var socket =.io.listen(server);
socket.sockets.on(‘connection’, function(socket) { socket.emit(‘xxx’,
{options}); socket.on(‘xxx’, function(data) { // do someting }); });

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
var http = require(‘http’);
var io = require(‘socket.io’);
 
var server = http.createServer(function(req, res) {
    res.writeHeader(200, {‘content-type’: ‘text/html;charset="utf-8"’});
    res.end();
}).listen(8888);
 
var socket =.io.listen(server);
 
socket.sockets.on(‘connection’, function(socket) {
    socket.emit(‘xxx’, {options});
 
    socket.on(‘xxx’, function(data) {
        // do someting
    });
});
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
var http = require(‘http’);
var io = require(‘socket.io’);
 
var server = http.createServer(function(req, res) {
    res.writeHeader(200, {‘content-type’: ‘text/html;charset="utf-8"’});
    res.end();
}).listen(8888);
 
var socket =.io.listen(server);
 
socket.sockets.on(‘connection’, function(socket) {
    socket.emit(‘xxx’, {options});
 
    socket.on(‘xxx’, function(data) {
        // do someting
    });
});
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
var http = require(‘http’);
var io = require(‘socket.io’);
 
var server = http.createServer(function(req, res) {
    res.writeHeader(200, {‘content-type’: ‘text/html;charset="utf-8"’});
    res.end();
}).listen(8888);
 
var socket =.io.listen(server);
 
socket.sockets.on(‘connection’, function(socket) {
    socket.emit(‘xxx’, {options});
 
    socket.on(‘xxx’, function(data) {
        // do someting
    });
});

深信通晓websocket的同学不容许不精通socket.io,因为socket.io太有名了,也很棒,它自己对逾期、握手等都做了拍卖。我猜忌那也是完结websocket使用最多的方式。socket.io最最最突出的少数就是优雅降级,当浏览器不辅助websocket时,它会在里面优雅降级为长轮询等,用户和开发者是不须求关爱具体已毕的,很方便。

相信精晓websocket的同室不容许不知晓socket.io,因为socket.io太盛名了,也很棒,它本身对逾期、握手等都做了拍卖。我臆想那也是促成websocket使用最多的办法。socket.io最最最非凡的一点就是优雅降级,当浏览器不协助websocket时,它会在里面优雅降级为长轮询等,用户和开发者是不必要关注具体贯彻的,很有益于。

深信不疑领会websocket的同室无法不知晓socket.io,因为socket.io太有名了,也很棒,它自己对过期、握手等都做了处理。我估摸那也是落到实处websocket使用最多的主意。socket.io最最最了不起的某些就是优雅降级,当浏览器不辅助websocket时,它会在里边优雅降级为长轮询等,用户和开发者是不需求关爱具体完结的,很有利。

不过事情是有两面性的,socket.io因为它的完美也牵动了坑的地点,最根本的就是臃肿,它的包装也给多少拉动了较多的简报冗余,而且优雅降级这一优点,也伴随浏览器标准化的进展逐步失去了远大

而是事情是有两面性的,socket.io因为它的宏观也带来了坑的地点,最关键的就是臃肿,它的卷入也给多少拉动了较多的报纸发布冗余,而且优雅降级这一优点,也陪同浏览器标准化的进展逐级失去了远大

然而工作是有两面性的,socket.io因为它的一揽子也牵动了坑的地点,最主要的就是臃肿,它的卷入也给多少推动了较多的通讯冗余,而且优雅降级这一独到之处,也随同浏览器标准化的举行逐级失去了高大

Chrome Supported in version 4+
Firefox Supported in version 4+
Internet Explorer Supported in version 10+
Opera Supported in version 10+
Safari Supported in version 5+
Chrome Supported in version 4+
Firefox Supported in version 4+
Internet Explorer Supported in version 10+
Opera Supported in version 10+
Safari Supported in version 5+
Chrome Supported in version 4+
Firefox Supported in version 4+
Internet Explorer Supported in version 10+
Opera Supported in version 10+
Safari Supported in version 5+

在此处不是指责说socket.io糟糕,已经被淘汰了,而是有时候大家也得以设想部分其余的兑现~

在此处不是指责说socket.io不好,已经被淘汰了,而是有时候大家也足以考虑部分其他的兑现~

在此处不是指责说socket.io糟糕,已经被淘汰了,而是有时候大家也得以考虑部分其它的贯彻~

 

 

 

2、http模块

2、http模块

2、http模块

恰巧说了socket.io臃肿,那现在就来说说便捷的,首先demo

凑巧说了socket.io臃肿,这现在就来说说便捷的,首先demo

正巧说了socket.io臃肿,那现在就来说说便捷的,首先demo

JavaScript

JavaScript

JavaScript

var http = require(‘http’); var server = http.createServer();
server.on(‘upgrade’, function(req) { console.log(req.headers); });
server.listen(8888);

var http = require(‘http’); var server = http.createServer();
server.on(‘upgrade’, function(req) { console.log(req.headers); });
server.listen(8888);

var http = require(‘http’); var server = http.createServer();
server.on(‘upgrade’, function(req) { console.log(req.headers); });
server.listen(8888);

1
2
3
4
5
6
var http = require(‘http’);
var server = http.createServer();
server.on(‘upgrade’, function(req) {
console.log(req.headers);
});
server.listen(8888);
1
2
3
4
5
6
var http = require(‘http’);
var server = http.createServer();
server.on(‘upgrade’, function(req) {
console.log(req.headers);
});
server.listen(8888);
1
2
3
4
5
6
var http = require(‘http’);
var server = http.createServer();
server.on(‘upgrade’, function(req) {
console.log(req.headers);
});
server.listen(8888);

很简短的贯彻,其实socket.io内部对websocket也是如此落成的,可是前边帮大家封装了一些handle处理,这里大家也得以协调去丰裕,给出两张socket.io中的源码图

很粗略的落成,其实socket.io内部对websocket也是这么落成的,可是前边帮大家封装了有些handle处理,那里大家也足以自己去丰盛,给出两张socket.io中的源码图

很简单的落到实处,其实socket.io内部对websocket也是那样完结的,可是前边帮大家封装了一部分handle处理,那里大家也能够团结去丰盛,给出两张socket.io中的源码图

图片 7

图片 8

图片 9

图片 10

图片 11

图片 12

 

 

 

3、ws模块

3、ws模块

3、ws模块

背后有个例证会用到,那里就提一下,前面具体看~

后边有个例子会用到,那里就提一下,前面具体看~

末尾有个例证会用到,那里就提一下,后边具体看~

 

 

 

二、自己完结一套server端websocket

二、自己已毕一套server端websocket

二、自己达成一套server端websocket

正巧说了二种普遍的websocket完毕格局,现在我们寻思,对于开发者来说

刚好说了两种普遍的websocket完毕形式,现在我们考虑,对于开发者来说

正要说了两种常见的websocket完毕格局,现在大家思考,对于开发者来说

websocket相对于传统http数据交互情势以来,伸张了服务器推送的风波,客户端接收到事件再开展相应处理,开发起来分裂并不是太大呀

websocket绝对于传统http数据交互方式以来,增添了服务器推送的轩然大波,客户端接收到事件再进行对应处理,开发起来分裂并不是太大啊

websocket相对于传统http数据交互格局以来,增加了服务器推送的轩然大波,客户端接收到事件再拓展对应处理,开发起来分化并不是太大啊

这是因为那多少个模块已经帮我们将数码帧解析此地的坑都填好了,第二有的我们将尝试自己创造一套简便的服务器端websocket模块

那是因为那多少个模块已经帮我们将数量帧解析此处的坑都填好了,第二部分我们将尝试自己制作一套简便的服务器端websocket模块

那是因为这多少个模块已经帮我们将数量帧解析那边的坑都填好了,第二有的大家将尝试自己创设一套简便的服务器端websocket模块

谢谢次碳酸钴的探讨协助,自我在此间这部分只是不难说下,若是对此有趣味好奇的请百度【web技术切磋所】

谢谢次碳酸钴的研商帮忙,自我在此处那有的只是简单说下,如若对此有趣味好奇的请百度【web技术钻探所】

谢谢次碳酸钴的切磋扶助,本身在那里那部分只是简短说下,如若对此有趣味好奇的请百度【web技术商量所】

协调落成服务器端websocket首要有两点,一个是利用net模块接受数据流,还有一个是对待官方的帧结构图解析数据,已毕那两有的就曾经形成了全套的尾部工作

祥和形成服务器端websocket主要有两点,一个是利用net模块接受数据流,还有一个是相对而言官方的帧结构图解析数据,完结那两片段就早已做到了整整的平底工作

自己姣好服务器端websocket主要有两点,一个是利用net模块接受数据流,还有一个是对照官方的帧结构图解析数据,达成那两有些就已经落成了全方位的最底层工作

率先给一个客户端发送websocket握手报文的抓包内容

先是给一个客户端发送websocket握手报文的抓包内容

率先给一个客户端发送websocket握手报文的抓包内容

相关文章

发表评论

电子邮件地址不会被公开。 必填项已用*标注

网站地图xml地图