Копировать cv :: Mat в CMSampleBufferRef

Question

Как я могу скопировать данные cv :: Mat обратно в sampleBuffer?

Мой сценарий выглядит следующим образом: Создаю cv :: Mat из pixelBuffer для определения ориентира и добавьте ориентиры в cv :: Mat изображения. Я хотел бы скопировать этот cv :: Mat в буфер образца, который будет показан с ориентиром.

Возможно ли это?

Я достиг этого с dlib, но нужно знать, как сделать это с сортом :: ковриком:

char *baseBuffer = (char *)CVPixelBufferGetBaseAddress(imageBuffer); 
img.reset(); 
long position = 0; 
while (img.move_next()) { 
     dlib::bgr_pixel& pixel = img.element(); 
     long bufferLocation = position * 4; //(row * width + column) * 4; 
     char b = baseBuffer[bufferLocation]; 
     char g = baseBuffer[bufferLocation + 1]; 
     char r = baseBuffer[bufferLocation + 2]; 
     dlib::bgr_pixel newpixel(b, g, r); 
     pixel = newpixel; 

     position++; 
    } 

Answer 1

я отвечаю на мой собственный вопрос.

Первое, что вам нужно, чтобы получить доступ к пиксельных данных резюме :: мат изображения, я последовал за этой большой solution

Затем вам нужно скопировать пиксель в буфер, начиная с basebuffer. После кода должны помочь вам достичь этого:

CVImageBufferRef imageBuffer = CMSampleBufferGetImageBuffer(sampleBuffer); 
char *baseBuffer = (char *)CVPixelBufferGetBaseAddress(imageBuffer); 
long position = 0; 
uint8_t* pixelPtr = (uint8_t*)targetImage.data; 
int cn = targetImage.channels(); 
cv::Scalar_<uint8_t> rgbPixel; 
for(int i = 0; i < targetImage.rows; i++) 
{ 
    for(int j = 0; j < targetImage.cols; j++) 
    { 
     long bufferLocation = position * 4; 

     rgbPixel.val[0] = pixelPtr[i*targetImage.cols*cn + j*cn + 0]; // B 
     rgbPixel.val[1] = pixelPtr[i*targetImage.cols*cn + j*cn + 1]; // G 
     rgbPixel.val[2] = pixelPtr[i*targetImage.cols*cn + j*cn + 2]; // R 
     baseBuffer[bufferLocation] = rgbPixel.val[2]; 
     baseBuffer[bufferLocation + 1] = rgbPixel.val[1]; 
     baseBuffer[bufferLocation + 2] = rgbPixel.val[0]; 
     position++; 
    } 
} 

Некоторые вещи, чтобы принять к сведению

• убедитесь, что вы CVPixelBufferLockBaseAddress и CVPixelBufferUnlockBaseAddress до и после операции. I
• Я делаю это на CV_8UC3, вы можете проверить свой cv :: mat
  тип.
• Я не сделал анализ производительности, но я получаю гладкий выход с этим.