Sockets 直播(套接字)-如何同步音频和视频?
1-哪一个更适合用于流式视频?TCP或UDP套接字,为什么Sockets 直播(套接字)-如何同步音频和视频?,sockets,streaming,video-streaming,live-streaming,Sockets,Streaming,Video Streaming,Live Streaming,1-哪一个更适合用于流式视频?TCP或UDP套接字,为什么 2-流媒体直播时,音频和视频分别来自服务器,因此如何确保我在设备上显示的视频和播放的音频同步?我会选择UDP。然而,这取决于你想要什么。UDP将丢弃数据包而不是等待(TCP)。取舍是你想要一个稳定的,但有时缓慢和昂贵的,还是一个高效的,但有时可能无法交付。您可以选择如何实现它以及如何使用它。我不久前编写了一个语音聊天应用程序,TCP是不可能的,如果您正在寻找接近实时的数据流,UDP多播确实是唯一的选择。不过,通过UDP进行流式传输存在两
2-流媒体直播时,音频和视频分别来自服务器,因此如何确保我在设备上显示的视频和播放的音频同步?我会选择UDP。然而,这取决于你想要什么。UDP将丢弃数据包而不是等待(TCP)。取舍是你想要一个稳定的,但有时缓慢和昂贵的,还是一个高效的,但有时可能无法交付。您可以选择如何实现它以及如何使用它。我不久前编写了一个语音聊天应用程序,TCP是不可能的,如果您正在寻找接近实时的数据流,UDP多播确实是唯一的选择。不过,通过UDP进行流式传输存在两个主要问题:
今天,甚至连youtube上的HTTP流。。。下面是一个nodejs应用程序,它将文件流式传输到浏览器客户端。。。将其用作实时视频流与音频完美同步的起点
// usage
// do following on server side (your laptop running nodejs)
// node this_file.js
//
// then once above is running point your browser at
// http://localhost:8888
//
// of course your browser could be on your mobile or own custom app
var http = require('http'),
fs = require('fs'),
util = require('util');
var path = "/path/to/audio/or/video/file/local/to/server/cool.mp4"; // put any audio or video file here
var port = 8888;
var host = "localhost";
http.createServer(function (req, res) {
var stat = fs.statSync(path);
var total = stat.size;
if (req.headers.range) { // meaning client (browser) has moved the forward/back slider
// which has sent this request back to this server logic ... cool
var range = req.headers.range;
var parts = range.replace(/bytes=/, "").split("-");
var partialstart = parts[0];
var partialend = parts[1];
var start = parseInt(partialstart, 10);
var end = partialend ? parseInt(partialend, 10) : total-1;
var chunksize = (end-start)+1;
console.log('RANGE: ' + start + ' - ' + end + ' = ' + chunksize);
var file = fs.createReadStream(path, {start: start, end: end});
res.writeHead(206, { 'Content-Range': 'bytes ' + start + '-' + end + '/' + total, 'Accept-Ranges': 'bytes', 'Content-Length': chunksize, 'Content-Type': 'video/mp4' });
file.pipe(res);
} else {
console.log('ALL: ' + total);
res.writeHead(200, { 'Content-Length': total, 'Content-Type': 'video/mp4' });
fs.createReadStream(path).pipe(res);
}
}).listen(port, host);
console.log("Server running at http://" + host + ":" + port + "/");