ScriptIntrinsicYuvToRGB или YUV420 Распределение нарушено?

Question

Я пытаюсь использовать класс ScriptIntrinsicYuvToRGB из renderscript, чтобы преобразовать YUV в RGB, где источник находится в формате YUV420. У меня есть 3 необработанных самолета, которые я читал из файлов, и пытаюсь их прокормить в YUV-вид распределения и передавать его через ScriptIntrinsicYuvToRGB.forEach.

Он правильно преобразует яркость (плоскость Y), но терпит неудачу по цветам, потому что каналы цветности, похоже, считывают все значения из местоположения buf [w * h] - см. Комментарий в примере кода. Это похоже на ошибку, когда Allocation неправильно адресует УФ-плоскости. Я так полагаю, потому что я тестировал скрипт, используя функцию rsGetElementAtYuv_uchar_U, и он дает то же значение (от buf [w * h]) для любых координат.

Я искал все места, если бы мог указать YUV-формат, например, шаги/смещения и т. Д., Но не нашел ничего такого, что установило Element.DataKind.PIXEL_YUV и Type.Builder.setYuvFormat(ImageFormat.YUV_420_888).

Может кто-нибудь помочь в этом?

{ 
     int w = 320, h = 172; 
     ScriptIntrinsicYuvToRGB yc = ScriptIntrinsicYuvToRGB.create(rs, Element.U8_4(rs)); 
     { 
     Element elemYUV = Element.createPixel(rs, Element.DataType.UNSIGNED_8, Element.DataKind.PIXEL_YUV); 
     Type typeYUV = new Type.Builder(rs, elemYUV).setX(w).setY(h).setYuvFormat(ImageFormat.YUV_420_888).create(); 
     Allocation yuv = Allocation.createTyped(rs, typeYUV); 
     byte[] buf = new byte[yuv.getBytesSize()]; 
     int offs = 0; 
     for(int i=0; i<3; i++){ 
      int sz = w*h; 
      if(i>0) 
       sz /= 4; 
      InputStream is = new FileInputStream("/sdcard/yuv/"+(i==0 ? 'y' : i==1 ? 'u' : 'v')); 
      int n = is.read(buf, offs, sz); 
      if(n!=sz) 
       throw new AssertionError("!"); 
      offs += sz; 
      is.close(); 
     } 
//    buf[w*h] = 0x40; 
     yuv.copyFrom(buf); 
     yc.setInput(yuv); 
     } 

     Type outType = new Type.Builder(rs, Element.U8_4(rs)).setX(w).setY(h).create(); 
     Allocation out = Allocation.createTyped(rs, outType); 
     yc.forEach(out); 

     int[] buf = new int[out.getBytesSize()/4]; 
     out.copy1DRangeToUnchecked(0, w*h, buf); 

     bm = Bitmap.createBitmap(w, h, Bitmap.Config.ARGB_8888); 
     bm.setPixels(buf, 0, bm.getWidth(), 0, 0, bm.getWidth(), bm.getHeight()); 
     iv.setImageBitmap(bm); 

     yc.destroy(); 
    } 

Answer 1

Одним из решений является просто заполнить выделение U8 и делать индексацию самостоятельно в пользовательский сценарий:

#pragma rs_fp_relaxed 
rs_allocation yuv_in; 
uint32_t width; 
uint32_t offset_to_u; 
uint32_t offset_to_v; 
uchar4 RS_KERNEL yuv_to_rgba(uint32_t x, uint32_t y) { 
    uint32_t index = y * width + x; 
    uint32_t uv_index = (y >> 1) * width + (x >> 1); 
    float Y = (float)rsGetElementAt_uchar(yuv_in, index); 
    float U = (float)rsGetElementAt_uchar(yuv_in, uv_index + offset_to_u); 
    float V = (float)rsGetElementAt_uchar(yuv_in, uv_index + offset_to_v); 
    float3 f_out; 
    f_out.r = Y + 1.403f * V; 
    f_out.g = Y - 0.344f * U - 0.714f * V; 
    f_out.b = Y + 1.770f * U; 
    f_out = clamp(f_out, 0.f, 255.f); 
    uchar4 out; 
    out.rgb = convert_uchar3(f_out); 
    out.a = 255; 
    return out; 
} 

Java:

sc.set_yuv_in(yuv_allocation); 
sc.set_width(width); 
sc.set_offset_to_u(width * height); 
sc.set_offset_to_v(width * height + (width/2 * height/2)); 
sc.forEach_yuv_to_rba(out); 

YUV_420_888 является более общей YUV тип для импорта из других ресурсов YUV в android. Я не думаю, что есть способ установить значения шага/смещения для плоскостей u/v, чтобы сделать его полезным для пользовательского преобразования.