私はnode.jsでファイル操作作業を行っています。使用するパッケージの多くは、ファイルを開いたり、作業を行ったりするために、「パス」を送信する必要があります。
しかし、何百万ものファイルを解析していて、実際にディスクに保存するのではなく、メモリに保存したいと考えています。ファイルの内容はすべて私のデータベースにあり、私がそれらに非常に素晴らしい仕事をするためだけに、それらをディスクに書き込むのは嫌です。
では、そんなことは可能でしょうか?
Linuxシステムを使用している場合は、次のnodejsコードを使用して独自のtmpfs(RAM)を作成できます。これにより、ノードコードに従って/ mnt/myramdiskにtmpfsが作成されます。ディレクトリ/ mnt/myramdiskは、明らかにmkdir/mnt/myramdiskを介して、事前に手動で作成する必要があります。
var MountPoint='/mnt/myramdisk';
var TextFile='/MyTextFileInRAM.txt';
var RAM_Size='512m';
const fs = require('fs');
const { exec } = require('child_process');
exec("awk '{print $2}' /proc/mounts | grep "+MountPoint, (err, stdout, stderr) => {
if (err) {
// node couldn't execute the command
//console.log(err);
console.log(MountPoint+' is Not Mounted yet. Im mounting it now:\n');
NotMountedYetSoMountIt();
return;
}
// the *entire* stdout and stderr (buffered)
if(stdout)
{
console.log(MountPoint+' is Already Mounted');
TextToWriteToFileOnTMPFS();
}
});
function NotMountedYetSoMountIt()
{
const { exec } = require('child_process');
exec('df -h && echo && mount -t tmpfs -o size='+RAM_Size+' tmpfs '+MountPoint+' && echo && df -h', (err, stdout, stderr) => {
if (err) {
// node couldn't execute the command
return;
}
// the *entire* stdout and stderr (buffered)
console.log(`stdout: ${stdout}`);
TextToWriteToFileOnTMPFS();
console.log(`stderr: ${stderr}`);
});
}
function TextToWriteToFileOnTMPFS()
{
let TextToWrite = 'Hello\n' +
'world @'+CurrentTime();
fs.writeFile(MountPoint+TextFile, TextToWrite, (err) => {
// throws an error, you could also catch it here
if (err) throw err;
// success case, the file was saved
console.log('saved!');
});
}
function addZero(i) {
if (i < 10) {
i = "0" + i;
}
return i;
}
function CurrentTime()
{
var d = new Date();
var h = addZero(d.getHours());
var m = addZero(d.getMinutes());
var s = addZero(d.getSeconds());
return h + ":" + m + ":" + s;
}
出力:
root@box:/daemons#node tmpfs_test.js && cat /mnt/myramdisk/MyTextFileInRAM.txt
/mnt/myramdisk is Not Mounted yet. Im mounting it now:
stdout: Filesystem Size Used Avail Use% Mounted on
udev 7.8G 0 7.8G 0% /dev
tmpfs 1.6G 1.4M 1.6G 1% /run
/dev/sda2 938G 436G 454G 49% /
tmpfs 7.8G 449M 7.4G 6% /dev/shm
tmpfs 5.0M 0 5.0M 0% /run/lock
tmpfs 7.8G 0 7.8G 0% /sys/fs/cgroup
/dev/loop1 90M 90M 0 100% /snap/core/8213
/dev/sda1 511M 6.1M 505M 2% /boot/efi
/dev/loop2 90M 90M 0 100% /snap/core/8268
Filesystem Size Used Avail Use% Mounted on
udev 7.8G 0 7.8G 0% /dev
tmpfs 1.6G 1.4M 1.6G 1% /run
/dev/sda2 938G 436G 454G 49% /
tmpfs 7.8G 449M 7.4G 6% /dev/shm
tmpfs 5.0M 0 5.0M 0% /run/lock
tmpfs 7.8G 0 7.8G 0% /sys/fs/cgroup
/dev/loop1 90M 90M 0 100% /snap/core/8213
/dev/sda1 511M 6.1M 505M 2% /boot/efi
/dev/loop2 90M 90M 0 100% /snap/core/8268
tmpfs 512M 0 512M 0% /mnt/myramdisk
stderr:
saved!
Hello
world @23:09:15
root@box:/daemons# node tmpfs_test.js && cat /mnt/myramdisk/MyTextFileInRAM.txt
/mnt/myramdisk is Already Mounted
saved!
Hello
world @23:09:19
この記事でそれを行う方法は可能であるようです 書き込み可能なメモリストリームを作成しています
Node.js用のインメモリファイルシステムである memfs
を使用できます。
自分のニーズに合ったライブラリが1つも見つからなかったため、 diskette を作成しました。これは、バッファや文字列などのデータを効率的に格納してストリーミング可能にする小さなライブラリです。私は自分のプロジェクトでそれを使用しており、今のところそれは魅力のように機能します。
バグを見つけた場合、またはバグに追加できるものが他にある場合はお知らせください。
多分データベースから各ファイルをフェッチした後、let myBuffer = Buffer.from(fetchedData)
を使用してBuffer
を作成し、次にmyBuffer.toString()
を使用してファイルを文字列に変更し、好きなように解析/操作します