Opencv Transforming Image

Question

Я новичок в Open Cv, я хочу преобразовать два изображения src и dst. Я использую cv::estimateRigidTransform() для вычисления матрицы преобразования, а затем с помощью cv::warpAffine() для преобразования из dst в src. когда я сравниваю новое преобразованное изображение с изображением src, он почти такой же (преобразованный), но когда я получаю разность абзацев нового преобразованного изображения и изображения src, есть большая разница. что я должен делать, поскольку у моего dst-изображения есть некоторый коэффициент вращения и коэффициент перевода. Вот мой код

cv::Mat transformMat = cv::estimateRigidTransform(src, dst, true); 
cv::Mat output; 
cv::Size dsize = leftImageMat.size(); //This specifies the output image size--change needed 
cv::warpAffine(src, output, transformMat, dsize); 

Src Изображение

назначения Изображение

вывода изображения

абсолютная разница Изображение

Благодаря

Answer 1

У вас есть какие-то неправильные представления о процессе.

Метод cv :: evaluationRigidTransform принимает в качестве входных данных два набора соответствующих точек. А затем решает систему уравнений найти матрицу преобразования. Результат преобразования соответствует src указывает на точки dst (точно или близко, если точное совпадение невозможно - например, плавающие координаты).

Если вы применяете оценкуRigidTransform на двух изображениях, OpenCV сначала находит соответствующие пары точек, используя некоторый внутренний метод (см. opencv docs).

cv :: warpAffine затем преобразует изображение src в dst согласно заданной матрице преобразования. Но любое (почти любое) преобразование - операция потери. Алгоритм должен оценивать некоторые данные, поскольку они недоступны. Этот процесс называется интерполяцией, используя известную информацию, которую вы вычисляете неизвестным значением. Некоторую информацию о масштабировании изображения можно найти на wiki. Те же правила применяются к другим преобразованиям - вращению, перекосу, перспективе ... Очевидно, это не относится к переводу.

Учитывая ваши тестовые изображения, я бы предположил, что OpenCV воспринимает абажур как ссылку. Из разницы ясно, что абажур лучше трансформируется. По умолчанию OpenCV использует линейную интерполяцию для деформирования, поскольку это самый быстрый метод. Но вы можете установить более продвинутый метод для достижения лучших результатов - снова обратитесь к opencv docs.

Вывод: Полученный результат очень хорош, если вы помните, это результат автоматизированного процесса. Если вам нужны лучшие результаты, вам нужно будет найти другой метод для выбора соответствующих точек. Или используйте лучший метод интерполяции. В любом случае, после преобразования, diff не будет 0. Это практически невозможно достичь, потому что битмап - это дискретная сетка пикселей, поэтому всегда будут какие-то промежутки, которые необходимо оценить.