图片的能力,websocket探索其与语音

websocket探索其与语音、图片的力量

2015/12/26 · JavaScript
· 3 评论 ·
websocket

初稿出处:
AlloyTeam   

说到websocket想比我们不会素不相识,固然不熟悉的话也没提到,一句话总结

“WebSocket protocol
是HTML5一种新的情商。它完结了浏览器与服务器全双工通信”

WebSocket相相比传统那些服务器推技术简直好了太多,大家得以挥手向comet和长轮询那个技术说拜拜啦,庆幸大家生存在全体HTML5的时期~

那篇小说大家将分三有的探索websocket

率先是websocket的科普使用,其次是全然本身创建服务器端websocket,最后是任重(英文名:rèn zhòng)而道远介绍利用websocket制作的多个demo,传输图片和在线语音聊天室,let’s
go

壹 、websocket常见用法

此处介绍二种自个儿觉着大规模的websocket落成……(留意:本文建立在node上下文环境

1、socket.io

先给demo

JavaScript

var http = require(‘http’); var io = require(‘socket.io’); var server =
http.createServer(function(req, res) { res.writeHeader(200,
{‘content-type’: ‘text/html;charset=”utf-8″‘}); res.end();
}).listen(8888); var socket =.io.listen(server);
socket.sockets.on(‘connection’, function(socket) { socket.emit(‘xxx’,
{options}); socket.on(‘xxx’, function(data) { // do someting }); });

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
var http = require(‘http’);
var io = require(‘socket.io’);
 
var server = http.createServer(function(req, res) {
    res.writeHeader(200, {‘content-type’: ‘text/html;charset="utf-8"’});
    res.end();
}).listen(8888);
 
var socket =.io.listen(server);
 
socket.sockets.on(‘connection’, function(socket) {
    socket.emit(‘xxx’, {options});
 
    socket.on(‘xxx’, function(data) {
        // do someting
    });
});

深信不疑明白websocket的同桌不大概不领会socket.io,因为socket.io太盛名了,也很棒,它本人对逾期、握手等都做了处理。作者狐疑那也是兑现websocket使用最多的措施。socket.io最最最非凡的少数就是优雅降级,当浏览器不支持websocket时,它会在里头优雅降级为长轮询等,用户和开发者是不要求关注具体完成的,很便宜。

可是事情是有两面性的,socket.io因为它的周到也推动了坑的地点,最重视的就是臃肿,它的包裹也给多少推动了较多的通信冗余,而且优雅降级这一亮点,也随同浏览器标准化的展开逐级失去了巨大

Chrome Supported in version 4+
Firefox Supported in version 4+
Internet Explorer Supported in version 10+
Opera Supported in version 10+
Safari Supported in version 5+

在此地不是指责说socket.io糟糕,已经被淘汰了,而是有时候大家也可以考虑部分其余的贯彻~

 

2、http模块

刚好说了socket.io臃肿,那今后就来说说便捷的,首先demo

JavaScript

var http = require(‘http’); var server = http.createServer();
server.on(‘upgrade’, function(req) { console.log(req.headers); });
server.listen(8888);

1
2
3
4
5
6
var http = require(‘http’);
var server = http.createServer();
server.on(‘upgrade’, function(req) {
console.log(req.headers);
});
server.listen(8888);

很简短的兑现,其实socket.io内部对websocket也是这么完结的,不过后边帮大家封装了一些handle处理,这里我们也足以协调去充分,给出两张socket.io中的源码图

图片 1

图片 2

 

3、ws模块

末尾有个例子会用到,那里就提一下,后边具体看~

 

二 、自个儿已毕一套server端websocket

正要说了二种普遍的websocket达成格局,未来我们思想,对于开发者来说

websocket相对于传统http数据交互情势以来,扩充了服务器推送的事件,客户端接收到事件再开展对应处理,开发起来差异并不是太大呀

这是因为那多少个模块已经帮大家将数据帧解析那里的坑都填好了,第一有个别大家将尝试自个儿打造一套简便的服务器端websocket模块

感激次碳酸钴的商量辅助,自作者在此间那某些只是简短说下,即使对此有趣味好奇的请百度【web技术研讨所】

协调做到服务器端websocket主要有两点,1个是选用net模块接受数据流,还有三个是比较官方的帧结构图解析数据,完成那两有的就早已成功了一切的平底工作

率先给3个客户端发送websocket握手报文的抓包内容

客户端代码很粗略

JavaScript

ws = new WebSocket(“ws://127.0.0.1:8888”);

1
ws = new WebSocket("ws://127.0.0.1:8888");

图片 3

劳务器端要对准这些key验证,就是讲key加上1个特定的字符串后做三回sha1运算,将其结果转换为base64送回去

JavaScript

var crypto = require(‘crypto’); var WS =
‘258EAFA5-E914-47DA-95CA-C5AB0DC85B11’;
require(‘net’).createServer(function(o) { var key;
o.on(‘data’,function(e) { if(!key) { // 获取发送过来的KEY key =
e.toString().match(/Sec-WebSocket-Key: (.+)/)[1]; //
连接上WS这么些字符串,并做三回sha1运算,最终转换来Base64 key =
crypto.createHash(‘sha1’).update(key+WS).digest(‘base64’); //
输出再次来到给客户端的数码,那几个字段都是必须的 o.write(‘HTTP/1.1 101
Switching Protocols\r\n’); o.write(‘Upgrade: websocket\r\n’);
o.write(‘Connection: Upgrade\r\n’); // 这么些字段带上服务器处理后的KEY
o.write(‘Sec-WebSocket-Accept: ‘+key+’\r\n’); //
输出空行,使HTTP头截至 o.write(‘\r\n’); } }); }).listen(8888);

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
var crypto = require(‘crypto’);
var WS = ‘258EAFA5-E914-47DA-95CA-C5AB0DC85B11’;
 
require(‘net’).createServer(function(o) {
var key;
o.on(‘data’,function(e) {
if(!key) {
// 获取发送过来的KEY
key = e.toString().match(/Sec-WebSocket-Key: (.+)/)[1];
// 连接上WS这个字符串,并做一次sha1运算,最后转换成Base64
key = crypto.createHash(‘sha1’).update(key+WS).digest(‘base64’);
// 输出返回给客户端的数据,这些字段都是必须的
o.write(‘HTTP/1.1 101 Switching Protocols\r\n’);
o.write(‘Upgrade: websocket\r\n’);
o.write(‘Connection: Upgrade\r\n’);
// 这个字段带上服务器处理后的KEY
o.write(‘Sec-WebSocket-Accept: ‘+key+’\r\n’);
// 输出空行,使HTTP头结束
o.write(‘\r\n’);
}
});
}).listen(8888);

如此握手部分就已经到位了,前边就是多少帧解析与转变的活了

先看下官方提供的帧结构示意图

图片 4

回顾介绍下

FIN为是还是不是终止的标记

途观SV为留下空间,0

opcode标识数据类型,是或不是分片,是还是不是二进制解析,心跳包等等

付给一张opcode对应图

图片 5

MASK是或不是接纳掩码

Payload len和后面extend payload length表示数据长度,那个是最麻烦的

PayloadLen唯有多人,换来无符号整型的话唯有0到127的取值,这么小的数值当然不大概描述较大的数据,因而显然当数码长度小于或等于125时候它才作为数据长度的描述,假诺那些值为126,则时候背后的多个字节来储存数据长度,假使为127则用前面七个字节来囤积数据长度

Masking-key掩码

上边贴出解析数据帧的代码

JavaScript

function decodeDataFrame(e) { var i = 0, j,s, frame = { FIN: e[i]
>> 7, Opcode: e[i++] & 15, Mask: e[i] >> 7,
PayloadLength: e[i++] & 0x7F }; if(frame.PayloadLength === 126) {
frame.PayloadLength = (e[i++] << 8) + e[i++]; }
if(frame.PayloadLength === 127) { i += 4; frame.PayloadLength =
(e[i++] << 24) + (e[i++]图片的能力,websocket探索其与语音。 << 16) + (e[i++] << 8)

  • e[i++]; } if(frame.Mask) { frame.MaskingKey = [e[i++], e[i++],
    e[i++], e[i++]]; for(j = 0, s = []; j < frame.PayloadLength;
    j++) { s.push(e[i+j] ^ frame.MaskingKey[j%4]); } } else { s =
    e.slice(i, i+frame.PayloadLength); } s = new Buffer(s); if(frame.Opcode
    === 1) { s = s.toString(); } frame.PayloadData = s; return frame; }
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
function decodeDataFrame(e) {
var i = 0,
j,s,
frame = {
FIN: e[i] >> 7,
Opcode: e[i++] & 15,
Mask: e[i] >> 7,
PayloadLength: e[i++] & 0x7F
};
 
if(frame.PayloadLength === 126) {
frame.PayloadLength = (e[i++] << 8) + e[i++];
}
 
if(frame.PayloadLength === 127) {
i += 4;
frame.PayloadLength = (e[i++] << 24) + (e[i++] << 16) + (e[i++] << 8) + e[i++];
}
 
if(frame.Mask) {
frame.MaskingKey = [e[i++], e[i++], e[i++], e[i++]];
 
for(j = 0, s = []; j < frame.PayloadLength; j++) {
s.push(e[i+j] ^ frame.MaskingKey[j%4]);
}
} else {
s = e.slice(i, i+frame.PayloadLength);
}
 
s = new Buffer(s);
 
if(frame.Opcode === 1) {
s = s.toString();
}
 
frame.PayloadData = s;
return frame;
}

下一场是变化数据帧的

JavaScript

function encodeDataFrame(e) { var s = [], o = new
Buffer(e.PayloadData), l = o.length; s.push((e.FIN << 7) +
e.Opcode); if(l < 126) { s.push(l); } else if(l < 0x10000) {
s.push(126, (l&0xFF00) >> 8, l&0xFF); } else { s.push(127, 0, 0,
0, 0, (l&0xFF000000) >> 24, (l&0xFF0000) >> 16, (l&0xFF00)
>> 8, l&0xFF); } return Buffer.concat([new Buffer(s), o]); }

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
function encodeDataFrame(e) {
var s = [],
o = new Buffer(e.PayloadData),
l = o.length;
 
s.push((e.FIN << 7) + e.Opcode);
 
if(l < 126) {
s.push(l);
} else if(l < 0x10000) {
s.push(126, (l&0xFF00) >> 8, l&0xFF);
} else {
s.push(127, 0, 0, 0, 0, (l&0xFF000000) >> 24, (l&0xFF0000) >> 16, (l&0xFF00) >> 8, l&0xFF);
}
 
return Buffer.concat([new Buffer(s), o]);
}

都以依据帧结构示意图上的去处理,在那里不细讲,文章紧要在下有个别,假如对那块感兴趣的话可以运动web技术探讨所~

 

叁 、websocket传输图片和websocket语音聊天室

正片环节到了,那篇文章最重大的依旧显示一下websocket的片段应用情况

一 、传输图片

大家先思考传输图片的步子是哪些,首先服务器收到到客户端请求,然后读取图片文件,将二进制数据转载给客户端,客户端如何处理?当然是选拔FileReader对象了

先给客户端代码

JavaScript

var ws = new WebSocket(“ws://xxx.xxx.xxx.xxx:8888”); ws.onopen =
function(){ console.log(“握手成功”); }; ws.onmessage = function(e) { var
reader = new FileReader(); reader.onload = function(event) { var
contents = event.target.result; var a = new Image(); a.src = contents;
document.body.appendChild(a); } reader.readAsDataUENCOREL(e.data); };

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
var ws = new WebSocket("ws://xxx.xxx.xxx.xxx:8888");
 
ws.onopen = function(){
    console.log("握手成功");
};
 
ws.onmessage = function(e) {
    var reader = new FileReader();
    reader.onload = function(event) {
        var contents = event.target.result;
        var a = new Image();
        a.src = contents;
        document.body.appendChild(a);
    }
    reader.readAsDataURL(e.data);
};

接到到新闻,然后readAsDataUKoleosL,直接将图纸base64添加到页面中

转到服务器端代码

JavaScript

fs.readdir(“skyland”, function(err, files) { if(err) { throw err; }
for(var i = 0; i < files.length; i++) { fs.readFile(‘skyland/’ +
files[i], function(err, data) { if(err) { throw err; }
o.write(encodeImgFrame(data)); }); } }); function encodeImgFrame(buf) {
var s = [], l = buf.length, ret = []; s.push((1 << 7) + 2);
if(l < 126) { s.push(l); } else if(l < 0x10000) { s.push(126,
(l&0xFF00) >> 8, l&0xFF); } else { s.push(127, 0, 0, 0, 0,
(l&0xFF000000) >> 24, (l&0xFF0000) >> 16, (l&0xFF00)
>> 8, l&0xFF); } return Buffer.concat([new Buffer(s), buf]); }

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
fs.readdir("skyland", function(err, files) {
if(err) {
throw err;
}
for(var i = 0; i < files.length; i++) {
fs.readFile(‘skyland/’ + files[i], function(err, data) {
if(err) {
throw err;
}
 
o.write(encodeImgFrame(data));
});
}
});
 
function encodeImgFrame(buf) {
var s = [],
l = buf.length,
ret = [];
 
s.push((1 << 7) + 2);
 
if(l < 126) {
s.push(l);
} else if(l < 0x10000) {
s.push(126, (l&0xFF00) >> 8, l&0xFF);
} else {
s.push(127, 0, 0, 0, 0, (l&0xFF000000) >> 24, (l&0xFF0000) >> 16, (l&0xFF00) >> 8, l&0xFF);
}
 
return Buffer.concat([new Buffer(s), buf]);
}

注意s.push((1 << 7) +
2)
这一句,那里十二分直接把opcode写死了为2,对于Binary
Frame,那样客户端接收到数量是不会尝试举行toString的,否则会报错~

代码很简短,在此处向大家享受一下websocket传输图片的进程怎么着

测试很多张图片,总共8.24M

常见静态财富服务器需求20s左右(服务器较远)

cdn需要2.8s左右

那大家的websocket格局呢??!

答案是一致须要20s左右,是还是不是很失望……速度就是慢在传输上,并不是服务器读取图片,本机上等同的图样财富,1s左右得以成功……那样看来数据流也无能为力冲破距离的范围进步传输速度

上边我们来探视websocket的另一个用法~

 

用websocket搭建语音聊天室

先来收拾一下口音聊天室的作用

用户进入频道随后从Mike风输入音频,然后发送给后台转载给频道里面的其余人,其旁人接收到音信举行广播

看起来困难在七个地点,第①个是音频的输入,第2是吸纳到数码流实行播报

先说音频的输入,这里运用了HTML5的getUserMedia方法,然则注意了,本条点子上线是有大坑的,最后说,先贴代码

JavaScript

if (navigator.getUserMedia) { navigator.getUserMedia( { audio: true },
function (stream) { var rec = new SRecorder(stream); recorder = rec; })
}

1
2
3
4
5
6
7
8
if (navigator.getUserMedia) {
    navigator.getUserMedia(
        { audio: true },
        function (stream) {
            var rec = new SRecorder(stream);
            recorder = rec;
        })
}

首先个参数是{audio:
true},只启用音频,然后创立了二个SRecorder对象,后续的操作基本上都在这一个目标上进展。此时一旦代码运营在本土的话浏览器应该升迁您是或不是启用Mike风输入,鲜明将来就开动了

接下去我们看下SRecorder构造函数是吗,给出主要的一对

JavaScript

var SRecorder = function(stream) { …… var context = new AudioContext();
var audioInput = context.createMediaStreamSource(stream); var recorder =
context.createScriptProcessor(4096, 1, 1); …… }

1
2
3
4
5
6
7
var SRecorder = function(stream) {
    ……
   var context = new AudioContext();
    var audioInput = context.createMediaStreamSource(stream);
    var recorder = context.createScriptProcessor(4096, 1, 1);
    ……
}

奥迪oContext是一个旋律上下文对象,有做过声音过滤处理的同窗应该清楚“一段音频到达扬声器进行播报以前,半路对其展开拦截,于是大家就获取了拍子数据了,那几个拦截工作是由window.奥迪(Audi)oContext来做的,大家有着对旋律的操作都根据这一个目标”,大家得以由此奥迪oContext创制不一样的奥迪(Audi)oNode节点,然后添加滤镜播放特别的声息

录音原理一样,大家也急需走奥迪oContext,不过多了一步对迈克风音频输入的收纳上,而不是像过去处理音频一下用ajax请求音频的ArrayBuffer对象再decode,迈克风的接受要求用到createMediaStreamSource方法,注意这些参数就是getUserMedia方法第四个参数的参数

加以createScriptProcessor方法,它官方的演讲是:

Creates a ScriptProcessorNode, which can be used for direct audio
processing via JavaScript.

——————

回顾下就是那个情势是选拔JavaScript去处理音频采集操作

究竟到点子采集了!胜利就在前方!

接下去让大家把迈克风的输入和旋律采集相连起来

JavaScript

audioInput.connect(recorder); recorder.connect(context.destination);

1
2
audioInput.connect(recorder);
recorder.connect(context.destination);

context.destination官方表明如下

The destination property of
the AudioContext interface
returns
an AudioDestinationNoderepresenting
the final destination of all audio in the context.

——————

context.destination再次来到代表在环境中的音频的最终目标地。

好,到了这儿,咱们还索要二个监听音频采集的轩然大波

JavaScript

recorder.onaudioprocess = function (e) {
audioData.input(e.inputBuffer.getChannelData(0)); }

1
2
3
recorder.onaudioprocess = function (e) {
    audioData.input(e.inputBuffer.getChannelData(0));
}

audioData是一个对象,那一个是在网上找的,我就加了一个clear方法因为前边会用到,紧要有不行encodeWAV方法很赞,外人举行了往往的韵律压缩和优化,那些最后会陪伴完整的代码一起贴出来

此刻全方位用户进入频道随后从Mike风输入音频环节就早已落成啦,上边就该是向劳动器端发送音频流,稍微有点蛋疼的来了,刚才大家说了,websocket通过opcode不同能够表示回去的数据是文件依旧二进制数据,而小编辈onaudioprocess中input进去的是数组,最后播放声音须要的是Blob,{type:
‘audio/wav’}的目的,那样我们就务要求在殡葬之前将数组转换到WAV的Blob,此时就用到了上面说的encodeWAV方法

服务器就像是很粗略,只要转发就行了

地面测试确实可以,不过天坑来了!将先后跑在服务器上时候调用getUserMedia方法提醒我无法不在1个长治的环境,相当于须要https,那意味ws也务必换来wss……据此服务器代码就不曾行使大家协调包裹的抓手、解析和编码了,代码如下

JavaScript

var https = require(‘https’); var fs = require(‘fs’); var ws =
require(‘ws’); var userMap = Object.create(null); var options = { key:
fs.readFileSync(‘./privatekey.pem’), cert:
fs.readFileSync(‘./certificate.pem’) }; var server =
https.createServer(options, function(req, res) { res.writeHead({
‘Content-Type’ : ‘text/html’ }); fs.readFile(‘./testaudio.html’,
function(err, data) { if(err) { return ; } res.end(data); }); }); var
wss = new ws.Server({server: server}); wss.on(‘connection’, function(o)
{ o.on(‘message’, function(message) { if(message.indexOf(‘user’) === 0)
{ var user = message.split(‘:’)[1]; userMap[user] = o; } else {
for(var u in userMap) { userMap[u].send(message); } } }); });
server.listen(8888);

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
var https = require(‘https’);
var fs = require(‘fs’);
var ws = require(‘ws’);
var userMap = Object.create(null);
var options = {
    key: fs.readFileSync(‘./privatekey.pem’),
    cert: fs.readFileSync(‘./certificate.pem’)
};
var server = https.createServer(options, function(req, res) {
    res.writeHead({
        ‘Content-Type’ : ‘text/html’
    });
 
    fs.readFile(‘./testaudio.html’, function(err, data) {
        if(err) {
            return ;
        }
 
        res.end(data);
    });
});
 
var wss = new ws.Server({server: server});
 
wss.on(‘connection’, function(o) {
    o.on(‘message’, function(message) {
if(message.indexOf(‘user’) === 0) {
    var user = message.split(‘:’)[1];
    userMap[user] = o;
} else {
    for(var u in userMap) {
userMap[u].send(message);
    }
}
    });
});
 
server.listen(8888);

代码如故很简单的,使用https模块,然后用了启幕说的ws模块,userMap是效仿的频道,只兑现转发的核心效能

使用ws模块是因为它卓殊https完成wss实在是太便宜了,和逻辑代码0争执

https的搭建在那边就不提了,重假使亟需私钥、CSSportage证书签名和证件文件,感兴趣的同桌可以驾驭下(然则不明白的话在现网环境也用持续getUserMedia……)

上边是完好的前端代码

JavaScript

var a = document.getElementById(‘a’); var b =
document.getElementById(‘b’); var c = document.getElementById(‘c’);
navigator.getUserMedia = navigator.getUserMedia ||
navigator.webkitGetUserMedia; var gRecorder = null; var audio =
document.querySelector(‘audio’); var door = false; var ws = null;
b.onclick = function() { if(a.value === ”) { alert(‘请输入用户名’);
return false; } if(!navigator.getUserMedia) {
alert(‘抱歉您的装备无意大利语音聊天’); return false; }
SRecorder.get(function (rec) { gRecorder = rec; }); ws = new
WebSocket(“wss://x.x.x.x:8888”); ws.onopen = function() {
console.log(‘握手成功’); ws.send(‘user:’ + a.value); }; ws.onmessage =
function(e) { receive(e.data); }; document.onkeydown = function(e) {
if(e.keyCode === 65) { if(!door) { gRecorder.start(); door = true; } }
}; document.onkeyup = function(e) { if(e.keyCode === 65) { if(door) {
ws.send(gRecorder.getBlob()); gRecorder.clear(); gRecorder.stop(); door
= false; } } } } c.onclick = function() { if(ws) { ws.close(); } } var
SRecorder = function(stream) { config = {}; config.sampleBits =
config.smapleBits || 8; config.sampleRate = config.sampleRate || (44100
/ 6); var context = new 奥迪(Audi)oContext(); var audioInput =
context.createMediaStreamSource(stream); var recorder =
context.createScriptProcessor(4096, 1, 1); var audioData = { size: 0
//录音文件长度 , buffer: [] //录音缓存 , inputSampleRate:
context.sampleRate //输入采样率 , inputSampleBits: 16 //输入采样数位 8,
16 , outputSampleRate: config.sampleRate //输出采样率 , oututSampleBits:
config.sampleBits //输出采样数位 8, 16 , clear: function() { this.buffer
= []; this.size = 0; } , input: function (data) { this.buffer.push(new
Float32Array(data)); this.size += data.length; } , compress: function ()
{ //合并压缩 //合并 var data = new Float32Array(this.size); var offset =
0; for (var i = 0; i < this.buffer.length; i++) {
data.set(this.buffer[i], offset); offset += this.buffer[i].length; }
//压缩 var compression = parseInt(this.inputSampleRate /
this.outputSampleRate); var length = data.length / compression; var
result = new Float32Array(length); var index = 0, j = 0; while (index
< length) { result[index] = data[j]; j += compression; index++; }
return result; } , encodeWAV: function () { var sampleRate =
Math.min(this.inputSampleRate, this.outputSampleRate); var sampleBits =
Math.min(this.inputSampleBits, this.oututSampleBits); var bytes =
this.compress(); var dataLength = bytes.length * (sampleBits / 8); var
buffer = new ArrayBuffer(44 + dataLength); var data = new
DataView(buffer); var channelCount = 1;//单声道 var offset = 0; var
writeString = function (str) { for (var i = 0; i < str.length; i++) {
data.setUint8(offset + i, str.charCodeAt(i)); } }; // 财富互换文件标识符
writeString(‘HighlanderIFF’); offset += 4; //
下个地方先导到文件尾总字节数,即文件大小-8 data.setUint32(offset, 36 +
dataLength, true); offset += 4; // WAV文件评释 writeString(‘WAVE’);
offset += 4; // 波形格式标志 writeString(‘fmt ‘); offset += 4; //
过滤字节,一般为 0x10 = 16 data.setUint32(offset, 16, true); offset += 4;
// 格式体系 (PCM方式采样数据) data.setUint16(offset, 1, true); offset +=
2; // 通道数 data.setUint16(offset, channelCount, true); offset += 2; //
采样率,每秒样本数,表示每一个通道的播放速度 data.setUint32(offset,
sampleRate, true); offset += 4; // 波形数据传输率 (每秒平均字节数)
单声道×每秒数据位数×每样本数据位/8 data.setUint32(offset, channelCount
* sampleRate * (sampleBits / 8), true); offset += 4; // 快数据调整数
采样四次占用字节数 单声道×每样本的多少位数/8 data.setUint16(offset,
channelCount * (sampleBits / 8), true); offset += 2; // 每样本数量位数
data.setUint16(offset, sampleBits, true); offset += 2; // 数据标识符
writeString(‘data’); offset += 4; // 采样数据总数,即数据总大小-44
data.setUint32(offset, dataLength, true); offset += 4; // 写入采样数据
if (sampleBits === 8) { for (var i = 0; i < bytes.length; i++,
offset++) { var s = Math.max(-1, Math.min(1, bytes[i])); var val = s
< 0 ? s * 0x8000 : s * 0x7FFF; val = parseInt(255 / (65535 / (val +
32768))); data.setInt8(offset, val, true); } } else { for (var i = 0; i
< bytes.length; i++, offset += 2) { var s = Math.max(-1, Math.min(1,
bytes[i])); data.setInt16(offset, s < 0 ? s * 0x8000 : s *
0x7FFF, true); } } return new Blob([data], { type: ‘audio/wav’ }); }
}; this.start = function () { audioInput.connect(recorder);
recorder.connect(context.destination); } this.stop = function () {
recorder.disconnect(); } this.getBlob = function () { return
audioData.encodeWAV(); } this.clear = function() { audioData.clear(); }
recorder.onaudioprocess = function (e) {
audioData.input(e.inputBuffer.getChannelData(0)); } }; SRecorder.get =
function (callback) { if (callback) { if (navigator.getUserMedia) {
navigator.getUserMedia( { audio: true }, function (stream) { var rec =
new SRecorder(stream); callback(rec); }) } } } function receive(e) {
audio.src = window.URL.createObjectURL(e); }

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
var a = document.getElementById(‘a’);
var b = document.getElementById(‘b’);
var c = document.getElementById(‘c’);
 
navigator.getUserMedia = navigator.getUserMedia || navigator.webkitGetUserMedia;
 
var gRecorder = null;
var audio = document.querySelector(‘audio’);
var door = false;
var ws = null;
 
b.onclick = function() {
    if(a.value === ”) {
        alert(‘请输入用户名’);
        return false;
    }
    if(!navigator.getUserMedia) {
        alert(‘抱歉您的设备无法语音聊天’);
        return false;
    }
 
    SRecorder.get(function (rec) {
        gRecorder = rec;
    });
 
    ws = new WebSocket("wss://x.x.x.x:8888");
 
    ws.onopen = function() {
        console.log(‘握手成功’);
        ws.send(‘user:’ + a.value);
    };
 
    ws.onmessage = function(e) {
        receive(e.data);
    };
 
    document.onkeydown = function(e) {
        if(e.keyCode === 65) {
            if(!door) {
                gRecorder.start();
                door = true;
            }
        }
    };
 
    document.onkeyup = function(e) {
        if(e.keyCode === 65) {
            if(door) {
                ws.send(gRecorder.getBlob());
                gRecorder.clear();
                gRecorder.stop();
                door = false;
            }
        }
    }
}
 
c.onclick = function() {
    if(ws) {
        ws.close();
    }
}
 
var SRecorder = function(stream) {
    config = {};
 
    config.sampleBits = config.smapleBits || 8;
    config.sampleRate = config.sampleRate || (44100 / 6);
 
    var context = new AudioContext();
    var audioInput = context.createMediaStreamSource(stream);
    var recorder = context.createScriptProcessor(4096, 1, 1);
 
    var audioData = {
        size: 0          //录音文件长度
        , buffer: []     //录音缓存
        , inputSampleRate: context.sampleRate    //输入采样率
        , inputSampleBits: 16       //输入采样数位 8, 16
        , outputSampleRate: config.sampleRate    //输出采样率
        , oututSampleBits: config.sampleBits       //输出采样数位 8, 16
        , clear: function() {
            this.buffer = [];
            this.size = 0;
        }
        , input: function (data) {
            this.buffer.push(new Float32Array(data));
            this.size += data.length;
        }
        , compress: function () { //合并压缩
            //合并
            var data = new Float32Array(this.size);
            var offset = 0;
            for (var i = 0; i < this.buffer.length; i++) {
                data.set(this.buffer[i], offset);
                offset += this.buffer[i].length;
            }
            //压缩
            var compression = parseInt(this.inputSampleRate / this.outputSampleRate);
            var length = data.length / compression;
            var result = new Float32Array(length);
            var index = 0, j = 0;
            while (index < length) {
                result[index] = data[j];
                j += compression;
                index++;
            }
            return result;
        }
        , encodeWAV: function () {
            var sampleRate = Math.min(this.inputSampleRate, this.outputSampleRate);
            var sampleBits = Math.min(this.inputSampleBits, this.oututSampleBits);
            var bytes = this.compress();
            var dataLength = bytes.length * (sampleBits / 8);
            var buffer = new ArrayBuffer(44 + dataLength);
            var data = new DataView(buffer);
 
            var channelCount = 1;//单声道
            var offset = 0;
 
            var writeString = function (str) {
                for (var i = 0; i < str.length; i++) {
                    data.setUint8(offset + i, str.charCodeAt(i));
                }
            };
 
            // 资源交换文件标识符
            writeString(‘RIFF’); offset += 4;
            // 下个地址开始到文件尾总字节数,即文件大小-8
            data.setUint32(offset, 36 + dataLength, true); offset += 4;
            // WAV文件标志
            writeString(‘WAVE’); offset += 4;
            // 波形格式标志
            writeString(‘fmt ‘); offset += 4;
            // 过滤字节,一般为 0x10 = 16
            data.setUint32(offset, 16, true); offset += 4;
            // 格式类别 (PCM形式采样数据)
            data.setUint16(offset, 1, true); offset += 2;
            // 通道数
            data.setUint16(offset, channelCount, true); offset += 2;
            // 采样率,每秒样本数,表示每个通道的播放速度
            data.setUint32(offset, sampleRate, true); offset += 4;
            // 波形数据传输率 (每秒平均字节数) 单声道×每秒数据位数×每样本数据位/8
            data.setUint32(offset, channelCount * sampleRate * (sampleBits / 8), true); offset += 4;
            // 快数据调整数 采样一次占用字节数 单声道×每样本的数据位数/8
            data.setUint16(offset, channelCount * (sampleBits / 8), true); offset += 2;
            // 每样本数据位数
            data.setUint16(offset, sampleBits, true); offset += 2;
            // 数据标识符
            writeString(‘data’); offset += 4;
            // 采样数据总数,即数据总大小-44
            data.setUint32(offset, dataLength, true); offset += 4;
            // 写入采样数据
            if (sampleBits === 8) {
                for (var i = 0; i < bytes.length; i++, offset++) {
                    var s = Math.max(-1, Math.min(1, bytes[i]));
                    var val = s < 0 ? s * 0x8000 : s * 0x7FFF;
                    val = parseInt(255 / (65535 / (val + 32768)));
                    data.setInt8(offset, val, true);
                }
            } else {
                for (var i = 0; i < bytes.length; i++, offset += 2) {
                    var s = Math.max(-1, Math.min(1, bytes[i]));
                    data.setInt16(offset, s < 0 ? s * 0x8000 : s * 0x7FFF, true);
                }
            }
 
            return new Blob([data], { type: ‘audio/wav’ });
        }
    };
 
    this.start = function () {
        audioInput.connect(recorder);
        recorder.connect(context.destination);
    }
 
    this.stop = function () {
        recorder.disconnect();
    }
 
    this.getBlob = function () {
        return audioData.encodeWAV();
    }
 
    this.clear = function() {
        audioData.clear();
    }
 
    recorder.onaudioprocess = function (e) {
        audioData.input(e.inputBuffer.getChannelData(0));
    }
};
 
SRecorder.get = function (callback) {
    if (callback) {
        if (navigator.getUserMedia) {
            navigator.getUserMedia(
                { audio: true },
                function (stream) {
                    var rec = new SRecorder(stream);
                    callback(rec);
                })
        }
    }
}
 
function receive(e) {
    audio.src = window.URL.createObjectURL(e);
}

注意:按住a键说话,放开a键发送

协调有品味不按键实时对讲,通过setInterval发送,但意识杂音有点重,效果不佳,这一个须要encodeWAV再一层的包装,多去除环境杂音的功能,自个儿采取了特别便民的按键说话的格局

 

那篇文章里第②展望了websocket的前程,然后根据专业大家友好尝尝解析和扭转数据帧,对websocket有了更深一步的刺探

末段通过八个demo看到了websocket的潜力,关于语音聊天室的demo涉及的较广,没有接触过奥迪oContext对象的同班最好先通晓下奥迪oContext

文章到此地就甘休啦~有何想法和难题欢迎我们指出来一起谈论探索~

 

1 赞 11 收藏 3
评论

图片 6

原文出处:
AlloyTeam   

初稿出处:
AlloyTeam   

原文出处:
AlloyTeam   

说到websocket想比我们不会目生,纵然素不相识的话也没提到,一句话归纳

说到websocket想比大家不会不熟悉,若是目生的话也没涉及,一句话总结

说到websocket想比我们不会素不相识,假诺面生的话也没涉及,一句话回顾

“WebSocket protocol
是HTML5一种新的合计。它完毕了浏览器与服务器全双工通讯”

“WebSocket protocol
是HTML5一种新的情商。它完结了浏览器与服务器全双工通讯”

“WebSocket protocol
是HTML5一种新的说道。它完成了浏览器与服务器全双工通讯”

WebSocket相相比较古板那多少个服务器推技术大概好了太多,大家可以挥手向comet和长轮询那个技巧说拜拜啦,庆幸我们生活在有着HTML5的时代~

WebSocket相相比较古板那个服务器推技术几乎好了太多,大家得以挥手向comet和长轮询那么些技术说拜拜啦,庆幸大家生存在富有HTML5的时日~

WebSocket相相比传统这一个服务器推技术大致好了太多,大家得以挥手向comet和长轮询这个技巧说拜拜啦,庆幸大家生存在享有HTML5的一时~

那篇小说大家将分三片段探索websocket

那篇作品我们将分三有的探索websocket

那篇小说我们将分三片段探索websocket

第③是websocket的周边使用,其次是一点一滴本人成立服务器端websocket,最后是相当紧要介绍利用websocket制作的多个demo,传输图片和在线语音聊天室,let’s
go

第三是websocket的广大使用,其次是全然本身创设服务器端websocket,最终是重大介绍利用websocket制作的两个demo,传输图片和在线语音聊天室,let’s
go

第壹是websocket的广泛使用,其次是一心本身制作服务器端websocket,最后是非常紧要介绍利用websocket制作的三个demo,传输图片和在线语音聊天室,let’s
go

壹 、websocket常见用法

一 、websocket常见用法

① 、websocket常见用法

此处介绍两种本身觉得大规模的websocket落成……(注意:本文建立在node上下文环境

这里介绍三种本人认为大规模的websocket完毕……(专注:本文建立在node上下文环境

那里介绍二种自作者以为大规模的websocket完成……(留神:本文建立在node上下文环境

1、socket.io

1、socket.io

1、socket.io

先给demo

先给demo

先给demo

JavaScript

JavaScript

JavaScript

var http = require(‘http’); var io = require(‘socket.io’); var server =
http.createServer(function(req, res) { res.writeHeader(200,
{‘content-type’: ‘text/html;charset=”utf-8″‘}); res.end();
}).listen(8888); var socket =.io.listen(server);
socket.sockets.on(‘connection’, function(socket) { socket.emit(‘xxx’,
{options}); socket.on(‘xxx’, function(data) { // do someting }); });

var http = require(‘http’); var io = require(‘socket.io’); var server =
http.createServer(function(req, res) { res.writeHeader(200,
{‘content-type’: ‘text/html;charset=”utf-8″‘}); res.end();
}).listen(8888); var socket =.io.listen(server);
socket.sockets.on(‘connection’, function(socket) { socket.emit(‘xxx’,
{options}); socket.on(‘xxx’, function(data) { // do someting }); });

var http = require(‘http’); var io = require(‘socket.io’); var server =
http.createServer(function(req, res) { res.writeHeader(200,
{‘content-type’: ‘text/html;charset=”utf-8″‘}); res.end();
}).listen(8888); var socket =.io.listen(server);
socket.sockets.on(‘connection’, function(socket) { socket.emit(‘xxx’,
{options}); socket.on(‘xxx’, function(data) { // do someting }); });

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
var http = require(‘http’);
var io = require(‘socket.io’);
 
var server = http.createServer(function(req, res) {
    res.writeHeader(200, {‘content-type’: ‘text/html;charset="utf-8"’});
    res.end();
}).listen(8888);
 
var socket =.io.listen(server);
 
socket.sockets.on(‘connection’, function(socket) {
    socket.emit(‘xxx’, {options});
 
    socket.on(‘xxx’, function(data) {
        // do someting
    });
});
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
var http = require(‘http’);
var io = require(‘socket.io’);
 
var server = http.createServer(function(req, res) {
    res.writeHeader(200, {‘content-type’: ‘text/html;charset="utf-8"’});
    res.end();
}).listen(8888);
 
var socket =.io.listen(server);
 
socket.sockets.on(‘connection’, function(socket) {
    socket.emit(‘xxx’, {options});
 
    socket.on(‘xxx’, function(data) {
        // do someting
    });
});
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
var http = require(‘http’);
var io = require(‘socket.io’);
 
var server = http.createServer(function(req, res) {
    res.writeHeader(200, {‘content-type’: ‘text/html;charset="utf-8"’});
    res.end();
}).listen(8888);
 
var socket =.io.listen(server);
 
socket.sockets.on(‘connection’, function(socket) {
    socket.emit(‘xxx’, {options});
 
    socket.on(‘xxx’, function(data) {
        // do someting
    });
});

相信驾驭websocket的同校不容许不知底socket.io,因为socket.io太盛名了,也很棒,它自个儿对逾期、握手等都做了拍卖。小编揣测那也是落到实处websocket使用最多的办法。socket.io最最最完美的一些就是优雅降级,当浏览器不帮助websocket时,它会在里面优雅降级为长轮询等,用户和开发者是不需要关切具体贯彻的,很便宜。

信任通晓websocket的同学不可以不精通socket.io,因为socket.io太闻明了,也很棒,它自己对逾期、握手等都做了拍卖。作者估算那也是落到实处websocket使用最多的措施。socket.io最最最精美的一些就是优雅降级,当浏览器不协理websocket时,它会在内部优雅降级为长轮询等,用户和开发者是不须要关切具体贯彻的,很便利。

信任通晓websocket的同班不能不精通socket.io,因为socket.io太知名了,也很棒,它自己对逾期、握手等都做了拍卖。小编猜想那也是促成websocket使用最多的法子。socket.io最最最美丽的一些就是优雅降级,当浏览器不协理websocket时,它会在中间优雅降级为长轮询等,用户和开发者是不必要关爱具体落实的,很有利。

然而事情是有两面性的,socket.io因为它的通盘也拉动了坑的地方,最要紧的就是臃肿,它的包装也给多少拉动了较多的简报冗余,而且优雅降级这一优点,也陪伴浏览器标准化的进行逐步失去了高大

唯独工作是有两面性的,socket.io因为它的应有尽有也拉动了坑的地方,最重大的就是臃肿,它的包裹也给多少牵动了较多的通信冗余,而且优雅降级这一亮点,也随同浏览器标准化的进展逐级失去了远大

但是工作是有两面性的,socket.io因为它的完善也带来了坑的地方,最器重的就是臃肿,它的卷入也给多少推动了较多的广播公布冗余,而且优雅降级这一独到之处,也随同浏览器标准化的开展逐步失去了巨大

Chrome Supported in version 4+
Firefox Supported in version 4+
Internet Explorer Supported in version 10+
Opera Supported in version 10+
Safari Supported in version 5+
Chrome Supported in version 4+
Firefox Supported in version 4+
Internet Explorer Supported in version 10+
Opera Supported in version 10+
Safari Supported in version 5+
Chrome Supported in version 4+
Firefox Supported in version 4+
Internet Explorer Supported in version 10+
Opera Supported in version 10+
Safari Supported in version 5+

在那边不是指责说socket.io倒霉,已经被淘汰了,而是有时候咱们也足以设想部分其余的兑现~

在此地不是指责说socket.io不佳,已经被淘汰了,而是有时候大家也足以设想部分别样的贯彻~

在此地不是指责说socket.io不佳,已经被淘汰了,而是有时候大家也得以考虑部分其余的落成~

 

 

 

2、http模块

2、http模块

2、http模块

刚刚说了socket.io臃肿,那将来就来说说便捷的,首先demo

刚巧说了socket.io臃肿,那今后就来说说便捷的,首先demo

赶巧说了socket.io臃肿,那今后就来说说便捷的,首先demo

JavaScript

JavaScript

JavaScript

var http = require(‘http’); var server = http.createServer();
server.on(‘upgrade’, function(req) { console.log(req.headers); });
server.listen(8888);

var http = require(‘http’); var server = http.createServer();
server.on(‘upgrade’, function(req) { console.log(req.headers); });
server.listen(8888);

var http = require(‘http’); var server = http.createServer();
server.on(‘upgrade’, function(req) { console.log(req.headers); });
server.listen(8888);

1
2
3
4
5
6
var http = require(‘http’);
var server = http.createServer();
server.on(‘upgrade’, function(req) {
console.log(req.headers);
});
server.listen(8888);
1
2
3
4
5
6
var http = require(‘http’);
var server = http.createServer();
server.on(‘upgrade’, function(req) {
console.log(req.headers);
});
server.listen(8888);
1
2
3
4
5
6
var http = require(‘http’);
var server = http.createServer();
server.on(‘upgrade’, function(req) {
console.log(req.headers);
});
server.listen(8888);

很简短的贯彻,其实socket.io内部对websocket也是这般完结的,可是前边帮大家封装了有些handle处理,那里大家也得以友善去丰硕,给出两张socket.io中的源码图

很简单的贯彻,其实socket.io内部对websocket也是那般已毕的,可是后边帮我们封装了部分handle处理,那里大家也得以团结去丰盛,给出两张socket.io中的源码图

很简单的落到实处,其实socket.io内部对websocket也是那样完结的,可是前面帮大家封装了一部分handle处理,那里我们也可以自个儿去丰裕,给出两张socket.io中的源码图

图片 7

图片 8

图片 9

图片 10

图片 11

图片 12

 

 

 

3、ws模块

3、ws模块

3、ws模块

后边有个例证会用到,这里就提一下,前面具体看~

后边有个例子会用到,这里就提一下,前面具体看~

末尾有个例子会用到,那里就提一下,前边具体看~

 

 

 

二 、自个儿已毕一套server端websocket

② 、自身完结一套server端websocket

② 、自个儿已毕一套server端websocket

刚巧说了三种常见的websocket完毕格局,未来我们思考,对于开发者来说

正巧说了三种常见的websocket完毕格局,未来我们想想,对于开发者来说

恰恰说了二种常见的websocket完结格局,以后大家寻思,对于开发者来说

websocket相对于传统http数据交互方式以来,扩张了服务器推送的事件,客户端接收到事件再展开对应处理,开发起来不同并不是太大啊

websocket相对于古板http数据交互方式以来,扩充了服务器推送的轩然大波,客户端接收到事件再展开对应处理,开发起来不相同并不是太大啊

websocket相对于古板http数据交互方式以来,伸张了服务器推送的风浪,客户端接收到事件再展开相应处理,开发起来不一样并不是太大啊

那是因为那个模块已经帮大家将数码帧解析此处的坑都填好了,第一部分大家将尝试本人制作一套简便的服务器端websocket模块

那是因为那多少个模块已经帮大家将多少帧解析此间的坑都填好了,第一片段我们将尝试自个儿制作一套简便的服务器端websocket模块

那是因为那多少个模块已经帮大家将多少帧解析那边的坑都填好了,第壹有的我们将尝试自身成立一套简便的服务器端websocket模块

多谢次碳酸钴的切磋协助,本人在此处这有个别只是简短说下,如若对此有趣味好奇的请百度【web技术研讨所】

感激次碳酸钴的研商协理,自己在此地这部分只是简单说下,假若对此有趣味好奇的请百度【web技术研商所】

谢谢次碳酸钴的钻研协理,自小编在此处那部分只是不难说下,即使对此有趣味好奇的请百度【web技术商量所】

协调成功服务器端websocket主要有两点,3个是行使net模块接受数据流,还有二个是比照官方的帧结构图解析数据,已毕那两片段就曾经成功了整整的最底层工作

协调落成服务器端websocket紧要有两点,二个是使用net模块接受数据流,还有几个是对待官方的帧结构图解析数据,完结那两局部就早已做到了方方面面的平底工作

和谐姣好服务器端websocket首要有两点,三个是利用net模块接受数据流,还有三个是对照官方的帧结构图解析数据,已毕那两有的就曾经完毕了上上下下的底部工作

先是给1个客户端发送websocket握手报文的抓包内容

第3给一个客户端发送websocket握手报文的抓包内容

率先给2个客户端发送websocket握手报文的抓包内容

发表评论

电子邮件地址不会被公开。 必填项已用*标注

网站地图xml地图