Как получить углы с помощью GPUImageHarrisCornerDetectionFilter

Question

Я пытаюсь получить угловые точки из неподвижного изображения, используя GPUImageHarrisCornerDetectionFilter.

Я посмотрел на примере кода из проекта, я посмотрел на документацию, и я смотрел на этот пост, который примерно то же самое: GPUImage Harris Corner Detection on an existing UIImage gives a black screen output

Но я не могу заставить его работать - и мне трудно понять, как это должно работать с неподвижными изображениями.

То, что я в данный момент заключается в следующем:

func harrisCorners() -> [CGPoint] { 
    var points = [CGPoint]() 

    let stillImageSource: GPUImagePicture = GPUImagePicture(image: self.image) 
    let filter = GPUImageHarrisCornerDetectionFilter() 

    filter.cornersDetectedBlock = { (cornerArray:UnsafeMutablePointer<GLfloat>, cornersDetected:UInt, frameTime:CMTime) in 
     for index in 0..<Int(cornersDetected) { 
      points.append(CGPoint(x:CGFloat(cornerArray[index * 2]), y:CGFloat(cornerArray[(index * 2) + 1]))) 
     } 
    } 

    filter.forceProcessingAtSize(self.image.size) 
    stillImageSource.addTarget(filter) 
    stillImageSource.processImage() 

    return points 
} 

Эта функция всегда возвращает [] так что, очевидно, не работает.

Интересная деталь. Я собрал проект FilterShowcaseSwift из примеров GPUImage, и фильтр не смог найти очень четкие углы, как на листе бумаги на черном фоне.

Answer 1

filter.cornersDetectedBlock = { (cornerArray:UnsafeMutablePointer<GLfloat>, cornersDetected:UInt, frameTime:CMTime) in 
    for index in 0..<Int(cornersDetected) { 
     points.append(CGPoint(x:CGFloat(cornerArray[index * 2]), y:CGFloat(cornerArray[(index * 2) + 1]))) 
    } 
} 

Этот код, который у вас здесь, содержит блок, который вызывается каждый кадр.

Это асинхронный процесс, поэтому, когда ваша функция возвращается, которая еще не была вызвана, а ваш массив должен всегда быть пустым. Он должен вызываться после завершения обработки кадра.

Чтобы проверить это, установите контрольную точку внутри этого блока и посмотрите, вызвана ли она.

Предупреждение от Брэда Ларсона (создатель GPUImage) в комментариях:

GPUImage создать здесь stillImageSource будут высвобождены после этой функции выходов и может привести к аварии в этом случае.