webRTCとサーバーベースのピア接続を使用してWebカメラとオーディオを記録する方法
ユーザーのウェブカメラと音声を記録し、サーバー上のファイルに保存したいと思います。これらのファイルは、他のユーザーに提供できます。
再生には問題ありませんが、コンテンツを記録するのに問題があります。
私の理解では、getUserMedia .record()関数はまだ書かれていません-これまでに提案されただけです。
PeerConnectionAPIを使用して、サーバー上にピア接続を作成したいと思います。これは少しハッキーだと理解していますが、サーバー上にピアを作成し、クライアントピアが送信したものを記録することは可能だと考えています。
これが可能であれば、このデータをflvまたは他のビデオ形式に保存できるはずです。
私の好みは、実際にクライアント側でウェブカメラとオーディオを記録し、アップロード前に最初の試みが気に入らなかった場合にクライアントがビデオを再記録できるようにすることです。これにより、ネットワーク接続の中断も可能になります。キャンバスにデータを送信することで、ウェブカメラから個々の「画像」を記録できるコードを見てきました。これは素晴らしいですが、音声も必要です。
ここに私がこれまで持っているクライアント側のコードがあります：
<video autoplay></video>
<script language="javascript" type="text/javascript">
function onVideoFail(e) {
console.log('webcam fail!', e);
};
function hasGetUserMedia() {
// Note: Opera is unprefixed.
return !!(navigator.getUserMedia || navigator.webkitGetUserMedia ||
navigator.mozGetUserMedia || navigator.msGetUserMedia);
}
if (hasGetUserMedia()) {
// Good to go!
} else {
alert('getUserMedia() is not supported in your browser');
}
window.URL = window.URL || window.webkitURL;
navigator.getUserMedia = navigator.getUserMedia || navigator.webkitGetUserMedia ||
navigator.mozGetUserMedia || navigator.msGetUserMedia;
var video = document.querySelector('video');
var streamRecorder;
var webcamstream;
if (navigator.getUserMedia) {
navigator.getUserMedia({audio: true, video: true}, function(stream) {
video.src = window.URL.createObjectURL(stream);
webcamstream = stream;
// streamrecorder = webcamstream.record();
}, onVideoFail);
} else {
alert ('failed');
}
function startRecording() {
streamRecorder = webcamstream.record();
setTimeout(stopRecording, 10000);
}
function stopRecording() {
streamRecorder.getRecordedData(postVideoToServer);
}
function postVideoToServer(videoblob) {
/* var x = new XMLHttpRequest();
x.open('POST', 'uploadMessage');
x.send(videoblob);
*/
var data = {};
data.video = videoblob;
data.metadata = 'test metadata';
data.action = "upload_video";
jQuery.post("http://www.foundthru.co.uk/uploadvideo.php", data, onUploadSuccess);
}
function onUploadSuccess() {
alert ('video uploaded');
}
</script>
<div id="webcamcontrols">
<a class="recordbutton" href="javascript:startRecording();">RECORD</a>
</div>
Kurento を必ず見てください。 WebRTCフィードなどから記録できるWebRTCサーバーインフラストラクチャを提供します。計画しているアプリケーションの例もいくつか見つけることができます here 。そのデモに録音機能を追加して、メディアファイルをURI（ローカルディスクまたはどこでも）に保存するのは本当に簡単です。
プロジェクトは、 LGPL Apache 2.0
編集1
この投稿以降、いくつかのシナリオでレコーダーを追加する方法を示す新しいチュートリアルを追加しました
- kurento-hello-world-recording ：レコーディングエンドポイントのさまざまな機能を示す簡単なレコーディングチュートリアル。
- kurento-one2one-recording ：1対1の通信をメディアサーバーに記録する方法。
- kurento-hello-world-repository ：外部リポジトリを使用してファイルを記録します。
免責事項：私はKurentoを開発するチームの一員です。
特にChromeが MediaRecorder v47およびFirefox v25からのAPIサポートを持っているという事実を考慮すると、動画を録画するためだけにkurentoまたは他のMCUを使用するのはちょっとやり過ぎだと思います。したがって、このジャンクションでは、ジョブを実行するのに外部jsライブラリさえ必要ないかもしれません。MediaRecorderを使用してビデオ/オーディオを記録するために作成したこのデモを試してください。
Demo -chromeおよびfirefoxで動作します（意図的にblobをサーバーコードにプッシュすることはありません）
Firefoxを実行している場合、ここでテストできます（chrome needs https）：
'use strict'
let log = console.log.bind(console),
id = val => document.getElementById(val),
ul = id('ul'),
gUMbtn = id('gUMbtn'),
start = id('start'),
stop = id('stop'),
stream,
recorder,
counter = 1,
chunks,
media;
gUMbtn.onclick = e => {
let mv = id('mediaVideo'),
mediaOptions = {
video: {
tag: 'video',
type: 'video/webm',
ext: '.mp4',
gUM: {
video: true,
audio: true
}
},
audio: {
tag: 'audio',
type: 'audio/ogg',
ext: '.ogg',
gUM: {
audio: true
}
}
};
media = mv.checked ? mediaOptions.video : mediaOptions.audio;
navigator.mediaDevices.getUserMedia(media.gUM).then(_stream => {
stream = _stream;
id('gUMArea').style.display = 'none';
id('btns').style.display = 'inherit';
start.removeAttribute('disabled');
recorder = new MediaRecorder(stream);
recorder.ondataavailable = e => {
chunks.Push(e.data);
if (recorder.state == 'inactive') makeLink();
};
log('got media successfully');
}).catch(log);
}
start.onclick = e => {
start.disabled = true;
stop.removeAttribute('disabled');
chunks = [];
recorder.start();
}
stop.onclick = e => {
stop.disabled = true;
recorder.stop();
start.removeAttribute('disabled');
}
function makeLink() {
let blob = new Blob(chunks, {
type: media.type
}),
url = URL.createObjectURL(blob),
li = document.createElement('li'),
mt = document.createElement(media.tag),
hf = document.createElement('a');
mt.controls = true;
mt.src = url;
hf.href = url;
hf.download = `${counter++}${media.ext}`;
hf.innerHTML = `donwload ${hf.download}`;
li.appendChild(mt);
li.appendChild(hf);
ul.appendChild(li);
} button {
margin: 10px 5px;
}
li {
margin: 10px;
}
body {
width: 90%;
max-width: 960px;
margin: 0px auto;
}
#btns {
display: none;
}
h1 {
margin-bottom: 100px;
}<link type="text/css" rel="stylesheet" href="https://maxcdn.bootstrapcdn.com/bootstrap/3.3.6/css/bootstrap.min.css">
<h1> MediaRecorder API example</h1>
<p>For now it is supported only in Firefox(v25+) and Chrome(v47+)</p>
<div id='gUMArea'>
<div>
Record:
<input type="radio" name="media" value="video" checked id='mediaVideo'>Video
<input type="radio" name="media" value="audio">audio
</div>
<button class="btn btn-default" id='gUMbtn'>Request Stream</button>
</div>
<div id='btns'>
<button class="btn btn-default" id='start'>Start</button>
<button class="btn btn-default" id='stop'>Stop</button>
</div>
<div>
<ul class="list-unstyled" id='ul'></ul>
</div>
<script src="https://code.jquery.com/jquery-2.2.0.min.js"></script>
<script src="https://maxcdn.bootstrapcdn.com/bootstrap/3.3.6/js/bootstrap.min.js"></script>はい、ご理解のとおり、MediaStreamRecorderは現在実装されていません。
MediaStreamRecorderは、getUserMedia（）ストリームを記録するためのWebRTC APIです。これにより、Webアプリはライブのオーディオ/ビデオセッションからファイルを作成できます。
または、このようにすることもできます http://ericbidelman.tumblr.com/post/31486670538/creating-webm-video-from-getusermedia しかし、オーディオの一部が欠落しています。
RecordRTC-together を使用できます。これはRecordRTCに基づいています。
ビデオとオーディオを別々のファイルにまとめて記録できます。サーバー上の2つのファイルを1つにマージするには、ffmpegなどのツールが必要です。
Web Call Server 4 は、WebRTCオーディオおよびビデオをWebMコンテナに記録できます。録音は、オーディオ用にVorbisコーデック、ビデオ用にVP8コーデックを使用して行われます。初期WebRTCコーデックはOpusまたはG.711およびVP8です。そのため、サーバー側の記録には、別のコンテナー、つまりAVIを使用する必要がある場合、Opus/G.711からVorbisへのサーバー側トランスコーディングまたはVP8-H.264トランスコーディングが必要です。
ヤヌスをご覧ください。録音デモは次のとおりです。
https://janus.conf.meetecho.com/recordplaytest.html
Twilioの買収後に開発が大幅に減速したKurentoとは異なり、Janusは引き続き積極的に開発およびサポートされています。
記録については、これについて十分な知識もありませんが、
しかし、私はこれをGitハブで見つけました-
<!DOCTYPE html>
<html>
<head>
<title>XSockets.WebRTC Client example</title>
<meta charset="utf-8" />
<style>
body {
}
.localvideo {
position: absolute;
right: 10px;
top: 10px;
}
.localvideo video {
max-width: 240px;
width:100%;
margin-right:auto;
margin-left:auto;
border: 2px solid #333;
}
.remotevideos {
height:120px;
background:#dadada;
padding:10px;
}
.remotevideos video{
max-height:120px;
float:left;
}
</style>
</head>
<body>
<h1>XSockets.WebRTC Client example </h1>
<div class="localvideo">
<video autoplay></video>
</div>
<h2>Remote videos</h2>
<div class="remotevideos">
</div>
<h2>Recordings ( Click on your camera stream to start record)</h2>
<ul></ul>
<h2>Trace</h2>
<div id="immediate"></div>
<script src="XSockets.latest.js"></script>
<script src="adapter.js"></script>
<script src="bobBinder.js"></script>
<script src="xsocketWebRTC.js"></script>
<script>
var $ = function (selector, el) {
if (!el) el = document;
return el.querySelector(selector);
}
var trace = function (what, obj) {
var pre = document.createElement("pre");
pre.textContent = JSON.stringify(what) + " - " + JSON.stringify(obj || "");
$("#immediate").appendChild(pre);
};
var main = (function () {
var broker;
var rtc;
trace("Ready");
trace("Try connect the connectionBroker");
var ws = new XSockets.WebSocket("wss://rtcplaygrouund.azurewebsites.net:443", ["connectionbroker"], {
ctx: '23fbc61c-541a-4c0d-b46e-1a1f6473720a'
});
var onError = function (err) {
trace("error", arguments);
};
var recordMediaStream = function (stream) {
if ("MediaRecorder" in window === false) {
trace("Recorder not started MediaRecorder not available in this browser. ");
return;
}
var recorder = new XSockets.MediaRecorder(stream);
recorder.start();
trace("Recorder started.. ");
recorder.oncompleted = function (blob, blobUrl) {
trace("Recorder completed.. ");
var li = document.createElement("li");
var download = document.createElement("a");
download.textContent = new Date();
download.setAttribute("download", XSockets.Utils.randomString(8) + ".webm");
download.setAttribute("href", blobUrl);
li.appendChild(download);
$("ul").appendChild(li);
};
};
var addRemoteVideo = function (peerId, mediaStream) {
var remoteVideo = document.createElement("video");
remoteVideo.setAttribute("autoplay", "autoplay");
remoteVideo.setAttribute("rel", peerId);
attachMediaStream(remoteVideo, mediaStream);
$(".remotevideos").appendChild(remoteVideo);
};
var onConnectionLost = function (remotePeer) {
trace("onconnectionlost", arguments);
var peerId = remotePeer.PeerId;
var videoToRemove = $("video[rel='" + peerId + "']");
$(".remotevideos").removeChild(videoToRemove);
};
var oncConnectionCreated = function () {
console.log(arguments, rtc);
trace("oncconnectioncreated", arguments);
};
var onGetUerMedia = function (stream) {
trace("Successfully got some userMedia , hopefully a goat will appear..");
rtc.connectToContext(); // connect to the current context?
};
var onRemoteStream = function (remotePeer) {
addRemoteVideo(remotePeer.PeerId, remotePeer.stream);
trace("Opps, we got a remote stream. lets see if its a goat..");
};
var onLocalStream = function (mediaStream) {
trace("Got a localStream", mediaStream.id);
attachMediaStream($(".localvideo video "), mediaStream);
// if user click, video , call the recorder
$(".localvideo video ").addEventListener("click", function () {
recordMediaStream(rtc.getLocalStreams()[0]);
});
};
var onContextCreated = function (ctx) {
trace("RTC object created, and a context is created - ", ctx);
rtc.getUserMedia(rtc.userMediaConstraints.hd(false), onGetUerMedia, onError);
};
var onOpen = function () {
trace("Connected to the brokerController - 'connectionBroker'");
rtc = new XSockets.WebRTC(this);
rtc.onlocalstream = onLocalStream;
rtc.oncontextcreated = onContextCreated;
rtc.onconnectioncreated = oncConnectionCreated;
rtc.onconnectionlost = onConnectionLost;
rtc.onremotestream = onRemoteStream;
rtc.onanswer = function (event) {
};
rtc.onoffer = function (event) {
};
};
var onConnected = function () {
trace("connection to the 'broker' server is established");
trace("Try get the broker controller form server..");
broker = ws.controller("connectionbroker");
broker.onopen = onOpen;
};
ws.onconnected = onConnected;
});
document.addEventListener("DOMContentLoaded", main);
</script>
私のケースコードの行番号89にOnrecordCompleteが実際にレコーダーファイルのリンクを追加します。そのリンクをクリックしてダウンロードを開始すると、そのパスをファイルとしてサーバーに保存できます。
記録コードは次のようになります
recorder.oncompleted = function (blob, blobUrl) {
trace("Recorder completed.. ");
var li = document.createElement("li");
var download = document.createElement("a");
download.textContent = new Date();
download.setAttribute("download", XSockets.Utils.randomString(8) + ".webm");
download.setAttribute("href", blobUrl);
li.appendChild(download);
$("ul").appendChild(li);
};
BlobUrlはパスを保持します。私はこれで私の問題を解決しました、誰かがこれが役に立つことを願っています