web-dev-qa-db-ja.com

Node.jsを使用してファイルを「メモリ」に保存できますか？

私はnode.jsでファイル操作作業を行っています。使用するパッケージの多くは、ファイルを開いたり、作業を行ったりするために、「パス」を送信する必要があります。

しかし、何百万ものファイルを解析していて、実際にディスクに保存するのではなく、メモリに保存したいと考えています。ファイルの内容はすべて私のデータベースにあり、私がそれらに非常に素晴らしい仕事をするためだけに、それらをディスクに書き込むのは嫌です。

では、そんなことは可能でしょうか？

javascriptnode.jsfile-io
22
Shamoon

Linuxシステムを使用している場合は、次のnodejsコードを使用して独自のtmpfs（RAM）を作成できます。これにより、ノードコードに従って/ mnt/myramdiskにtmpfsが作成されます。ディレクトリ/ mnt/myramdiskは、明らかにmkdir/mnt/myramdiskを介して、事前に手動で作成する必要があります。

var MountPoint='/mnt/myramdisk';
var TextFile='/MyTextFileInRAM.txt';
var RAM_Size='512m';

const fs = require('fs');

const { exec } = require('child_process');
exec("awk '{print $2}' /proc/mounts | grep "+MountPoint, (err, stdout, stderr) => {
  if (err) {
    // node couldn't execute the command
    //console.log(err);
    console.log(MountPoint+' is Not Mounted yet. Im mounting it now:\n');
    NotMountedYetSoMountIt();
    return;
  }
  // the *entire* stdout and stderr (buffered)
  if(stdout)
    {
        console.log(MountPoint+' is Already Mounted');
        TextToWriteToFileOnTMPFS();
    } 
});

function NotMountedYetSoMountIt()
{
    const { exec } = require('child_process');
    exec('df -h && echo && mount -t tmpfs -o size='+RAM_Size+' tmpfs '+MountPoint+' && echo && df -h', (err, stdout, stderr) => {
      if (err) {
        // node couldn't execute the command
        return;
      }
    // the *entire* stdout and stderr (buffered)
    console.log(`stdout: ${stdout}`);
    TextToWriteToFileOnTMPFS();
    console.log(`stderr: ${stderr}`);
    });
}

function TextToWriteToFileOnTMPFS()
{

    let TextToWrite = 'Hello\n' + 
                      'world @'+CurrentTime();

    fs.writeFile(MountPoint+TextFile, TextToWrite, (err) => {
        // throws an error, you could also catch it here
        if (err) throw err;
        // success case, the file was saved
        console.log('saved!');
    });
}

function addZero(i) {
  if (i < 10) {
    i = "0" + i;
  }
  return i;
}
function CurrentTime()
{
  var d = new Date();
  var h = addZero(d.getHours());
  var m = addZero(d.getMinutes());
  var s = addZero(d.getSeconds());
  return h + ":" + m + ":" + s;
}

出力：

root@box:/daemons#node tmpfs_test.js && cat /mnt/myramdisk/MyTextFileInRAM.txt
/mnt/myramdisk is Not Mounted yet. Im mounting it now:

stdout: Filesystem      Size  Used Avail Use% Mounted on
udev            7.8G     0  7.8G   0% /dev
tmpfs           1.6G  1.4M  1.6G   1% /run
/dev/sda2       938G  436G  454G  49% /
tmpfs           7.8G  449M  7.4G   6% /dev/shm
tmpfs           5.0M     0  5.0M   0% /run/lock
tmpfs           7.8G     0  7.8G   0% /sys/fs/cgroup
/dev/loop1       90M   90M     0 100% /snap/core/8213
/dev/sda1       511M  6.1M  505M   2% /boot/efi
/dev/loop2       90M   90M     0 100% /snap/core/8268


Filesystem      Size  Used Avail Use% Mounted on
udev            7.8G     0  7.8G   0% /dev
tmpfs           1.6G  1.4M  1.6G   1% /run
/dev/sda2       938G  436G  454G  49% /
tmpfs           7.8G  449M  7.4G   6% /dev/shm
tmpfs           5.0M     0  5.0M   0% /run/lock
tmpfs           7.8G     0  7.8G   0% /sys/fs/cgroup
/dev/loop1       90M   90M     0 100% /snap/core/8213
/dev/sda1       511M  6.1M  505M   2% /boot/efi
/dev/loop2       90M   90M     0 100% /snap/core/8268
tmpfs           512M     0  512M   0% /mnt/myramdisk

stderr:
saved!
Hello
world @23:09:15



root@box:/daemons# node tmpfs_test.js && cat /mnt/myramdisk/MyTextFileInRAM.txt
/mnt/myramdisk is Already Mounted
saved!
Hello
world @23:09:19
1
CMP

この記事でそれを行う方法は可能であるようです 書き込み可能なメモリストリームを作成しています

11
user3210416

Node.js用のインメモリファイルシステムである memfs を使用できます。

5
Vad

自分のニーズに合ったライブラリが1つも見つからなかったため、 diskette を作成しました。これは、バッファや文字列などのデータを効率的に格納してストリーミング可能にする小さなライブラリです。私は自分のプロジェクトでそれを使用しており、今のところそれは魅力のように機能します。

バグを見つけた場合、またはバグに追加できるものが他にある場合はお知らせください。

4
samvv

多分データベースから各ファイルをフェッチした後、let myBuffer = Buffer.from(fetchedData)を使用してBufferを作成し、次にmyBuffer.toString()を使用してファイルを文字列に変更し、好きなように解析/操作します

1
omarwaleed