установка ограничивающей рамки вокруг текста на изображении

Question

Я хочу сравнить два скриншота, содержащие текст. В основном оба скриншота содержат довольно симпатичный отформатированный текст. Я хочу сравнить, отражается ли такое же форматирование как на изображениях, так и на том же тексте, отображаемом в одном и том же месте на обоих изображениях.

Как я делаю это прямо сейчас -

1. Apply bilateral filters to remove the underlines of text. 
2. Apply threshold with value 180 as min value and clear them out 
3. Apply Gaussian blur on the image to remove the unfilled space between the characters. 
4. Apply threshold again with value 250 as min value. 
5. Compute contours in the images 
6. Draw rectangle bounding box around contours 
7. use O(n^2) algo to find out max overlapped rectangle and compare text within it. 

Однако проблема заключается в контуры, появляющиеся в обоих изображениях разные, то есть в одном из image number of contours are 38 while other contains 53. Я хочу иметь общее решение и не хочу зависеть от содержимого изображения. Однако, несомненно, изображение содержит хорошо отформатированный текст.

Благодаря

Answer 1

Я не уверен, чтобы понять, что вы хотите точно, но, чтобы получить ограничивающую рамку вокруг слова в образе, я мог бы сделать это:

1. Применить обработку, чтобы получить хороший пороговую: только текст, фон в черном, текст в белом. Этот шаг зависит от типа и качества вашего изображения.
2. Вычислить сумму каждой строки. Сумма должна отличаться от 0, где есть текст, и все строки в пространстве между каждой строкой должны быть нулевыми (вы можете установить порог этого значения, если есть некоторый шум). Вы можете найти верхнюю/нижнюю строку для каждой текстовой строки
3. Для каждой текстовой строки, найденной на шаге 2, вычислите сумму каждого столбца. То же, что и в шаге два, столбцы со словом должны отличаться от 0. Вы можете найти все пробелы между словами и буквами. Удалите все пробелы, которые слишком малы, чтобы быть пробелом между двумя словами.
4. Поздравляем, у вас есть верхняя/нижняя строка и первые/последние столбцы каждого слова.