web-dev-qa-db-ja.com

AndroidカメラのNV21形式から白黒画像を抽出する

私はいくつかグーグルで回りましたが、このフォーマットに関する十分な情報を見つけることができませんでした。これは、カメラプレビューのデフォルトの形式です。それについての良い情報源と、そのフォーマットで写真/プレビュー画像からデータを抽出する方法を誰かが提案できますか？具体的には、白黒の画像を抽出する必要があります。

編集：そのフォーマットはYCbCr 420セミプラナーとも呼ばれているようです

androidandroid-camerargbformat-conversion
31
Ethan

NV21をRGBに変換する次のコードを開発しましたが、正常に動作しています。

/**
 * Converts YUV420 NV21 to RGB8888
 * 
 * @param data byte array on YUV420 NV21 format.
 * @param width pixels width
 * @param height pixels height
 * @return a RGB8888 pixels int array. Where each int is a pixels ARGB. 
 */
public static int[] convertYUV420_NV21toRGB8888(byte [] data, int width, int height) {
    int size = width*height;
    int offset = size;
    int[] pixels = new int[size];
    int u, v, y1, y2, y3, y4;

    // i percorre os Y and the final pixels
    // k percorre os pixles U e V
    for(int i=0, k=0; i < size; i+=2, k+=2) {
        y1 = data[i  ]&0xff;
        y2 = data[i+1]&0xff;
        y3 = data[width+i  ]&0xff;
        y4 = data[width+i+1]&0xff;

        u = data[offset+k  ]&0xff;
        v = data[offset+k+1]&0xff;
        u = u-128;
        v = v-128;

        pixels[i  ] = convertYUVtoRGB(y1, u, v);
        pixels[i+1] = convertYUVtoRGB(y2, u, v);
        pixels[width+i  ] = convertYUVtoRGB(y3, u, v);
        pixels[width+i+1] = convertYUVtoRGB(y4, u, v);

        if (i!=0 && (i+2)%width==0)
            i+=width;
    }

    return pixels;
}

private static int convertYUVtoRGB(int y, int u, int v) {
    int r,g,b;

    r = y + (int)(1.402f*v);
    g = y - (int)(0.344f*u +0.714f*v);
    b = y + (int)(1.772f*u);
    r = r>255? 255 : r<0 ? 0 : r;
    g = g>255? 255 : g<0 ? 0 : g;
    b = b>255? 255 : b<0 ? 0 : b;
    return 0xff000000 | (b<<16) | (g<<8) | r;
}

この画像は理解に役立ちます。 YUV420 NV21

グレースケール画像だけを使いたい場合は、より簡単です。すべてのUおよびV情報を破棄し、Y情報のみを取得できます。コードは次のようになります。

/**
 * Converts YUV420 NV21 to Y888 (RGB8888). The grayscale image still holds 3 bytes on the pixel.
 * 
 * @param pixels output array with the converted array o grayscale pixels
 * @param data byte array on YUV420 NV21 format.
 * @param width pixels width
 * @param height pixels height
 */
public static void applyGrayScale(int [] pixels, byte [] data, int width, int height) {
    int p;
    int size = width*height;
    for(int i = 0; i < size; i++) {
        p = data[i] & 0xFF;
        pixels[i] = 0xff000000 | p<<16 | p<<8 | p;
    }
}

ビットマップを作成するには：

Bitmap bm = Bitmap.createBitmap(pixels, width, height, Bitmap.Config.ARGB_8888);

ここで、pixelsはint []配列です。

81
Derzu

NV21は基本的にYUV420ですが、Y、U、Vが独立した平面を持つ平面フォーマットではなく、NV21は輝度用に1つの平面とクロマ用に2番目の平面を持っています。形式は次のようになります

YYYYYYYYYYYYYYYYYYYYYYYYYYYYY YYYYYYYYYYYYYYYYYYYYYYYYYYYYY 。 。 。

VUVUVUVUVUVUVUVUVUVUVUVUVUVUVU VUVUVUVUVUVUVUVUVUVUVUVUVUVUVU 。 。 。 。

12
Mayank

また、このプレビュー形式のため、頭痛の種もたくさんありました。

私が見つけることができる最高のものはこれらです：

http://www.fourcc.org/yuv.php#NV21

http://v4l2spec.bytesex.org/spec/r5470.htm

Yコンポーネントは、取得する配列の最初のwidth * heightバイトのようです。

その他の情報リンク：

http://msdn.Microsoft.com/en-us/library/ms867704.aspx#yuvformats_yuvsampling

http://msdn.Microsoft.com/en-us/library/ff538197（v = vs.85）.aspx

お役に立てれば。

7
Max

データはYUV420形式です。
モノクロチャネルのみに関心がある場合、つまり「白黒」の場合、これが最初のwidth x heightバイトのデータバッファが既にあります。
Yチャネルはfirstイメージプレーンです。それはまさに灰色/強度/明度などのチャネルです。

4
Adi Shavit

グレイスケール画像データを抽出するコードは次のとおりです。

private int[] decodeGreyscale(byte[] nv21, int width, int height) {
    int pixelCount = width * height;
    int[] out = new int[pixelCount];
    for (int i = 0; i < pixelCount; ++i) {
        int luminance = nv21[i] & 0xFF;
        out[i] = Color.argb(0xFF, luminance, luminance, luminance);
    }
    return out;
}
3
Sam

グレースケールカメラのプレビューのみが必要な場合は、非常に単純なレンダースクリプトを使用できます。

# pragma version(1)
# pragma rs Java_package_name(com.example.name)
# pragma rs_fp_relaxed

rs_allocation gIn;   // Allocation filled with camera preview data (byte[])
int previewwidth;    // camera preview width (int)

// the parallel executed kernel
void root(uchar4 *v_out, uint32_t x,uint32_t y){
   uchar c = rsGetElementAt_uchar(gIn,x+y*previewwidth); 
   *v_out = (uchar4){c,c,c,255};
}

注：これはnot ScriptIntrinsicYuvToRGB（および次のScriptIntrinsicColorMatrixでRGBA->グレーを行う）より高速ですが、API 11+（イントリンシックスにはAPI 17+が必要）で実行されます。

1
Matti81