检测纸上的黑色墨水斑点 - Opencv Android

Question

我是 openCV 的新手，我一直在研究为 Android 提供的示例。

我的目标是检测 color-blobs 所以我从 color-blob-detection 样本开始。

我正在将彩色图像转换为灰度图像，然后使用二进制阈值进行阈值处理。

背景是白色的，斑点是黑色的。我想检测那些黑色斑点。另外，我想用彩色画出他们的轮廓，但我做不到，因为图像是黑白的。

我已经设法在灰度中完成了这个，但我不喜欢绘制轮廓的方式，就像颜色容差太高并且轮廓比实际的斑点大（也许斑点太小了？） .我想我说的这个 'tolerance' 与 setHsvColor 有关，但我不太了解该方法。

提前致谢！最好的问候

更新更多信息

我要跟踪的图像是墨水分裂。想象一张带有黑色墨水裂纹的白纸。现在我正在 real-time（相机视图）中进行操作。实际的应用程序会拍照并分析该照片。

正如我上面所说，我从 openCV GitHub repo 中获取了 color-blob-detection 样本（android）。我在 onCameraFrame 方法中添加此代码（以便在 real-time 中将其转换为黑白）进行转换，因此我不介意墨水是否为黑色, 蓝, 红:

mRgba = inputFrame.rgba();
/**************************************************************************/
/** BLACK AND WHITE **/
// Convert to Grey
Imgproc.cvtColor(inputFrame.gray(), mRgba, Imgproc.COLOR_GRAY2RGBA, 4);

Mat blackAndWhiteMat = new Mat ( H, W, CvType.CV_8U, new Scalar(1));
double umbral = 100.0;
Imgproc.threshold(mRgba, blackAndWhiteMat , umbral, 255, Imgproc.THRESH_BINARY);

// convert back to bitmap for displaying
Bitmap resultBitmap = Bitmap.createBitmap(mRgba.cols(), mRgba.rows(), Bitmap.Config.ARGB_8888);
blackAndWhiteMat.convertTo(blackAndWhiteMat, CvType.CV_8UC1);
Utils.matToBitmap(blackAndWhiteMat, resultBitmap);
/**************************************************************************/

这可能不是最好的方法，但它确实有效。

现在我想检测黑色斑点（墨水分裂）。我猜它们被检测到是因为 Logcat （示例应用程序的日志条目）抛出检测到的轮廓数量，但我看不到它们，因为图像是黑白的，我希望轮廓是红色的，例如。

这是一个示例图片：-

这是我使用 RGB 得到的结果（color-blob-detection 原样，不是黑白图像）。请注意未检测到小斑点的程度。（是否有可能检测到它们？还是它们太小了？）

感谢您的帮助！如果您需要更多信息，我很乐意更新此问题

更新：GitHub color-blob-detection 样本的回购（第二张图片）

GitHub Repo of openCV sample for Android

Answer 1

该解决方案基于自适应图像阈值处理和连通分量算法的使用相结合。

假设 - 纸张是图像中最亮的区域，而纸张上的墨点是最暗的区域。

from random import Random
import numpy as np
import cv2

def random_color(random):
    """
    Return a random color
    """
    icolor = random.randint(0, 0xFFFFFF)
    return [icolor & 0xff, (icolor >> 8) & 0xff, (icolor >> 16) & 0xff]

#Read as Grayscale
img = cv2.imread('1-input.jpg', 0)
cimg = cv2.cvtColor(img,cv2.COLOR_GRAY2BGR)

# Gaussian to remove noisy region, comment to see its affect.
img = cv2.medianBlur(img,5)

#Find average intensity to distinguish paper region
avgPixelIntensity = cv2.mean( img )
print "Average intensity of image: ", avgPixelIntensity[0]

# Generate mask to distinguish paper region
#0.8 - used to ignore ill-illuminated region of paper
mask = cv2.inRange(img, avgPixelIntensity[0]*0.8, 255) 
mask = 255 - mask
cv2.imwrite('2-maskedImg.jpg', mask)

#Approach 1
# You need to choose 4 or 8 for connectivity type(border pixels)
connectivity = 8
# Perform the operation
output = cv2.connectedComponentsWithStats(mask, connectivity, cv2.CV_8U)
# The first cell is the number of labels
num_labels = output[0]
# The second cell is the label matrix
labels = output[1]
# The third cell is the stat matrix
stats = output[2]
# The fourth cell is the centroid matrix
centroids = output[3]

cv2.imwrite("3-connectedcomponent.jpg", labels)
print "Number of labels", num_labels, labels

# create the random number
random = Random()

for i in range(1, num_labels):
    print stats[i, cv2.CC_STAT_LEFT], stats[i, cv2.CC_STAT_TOP], stats[i, cv2.CC_STAT_WIDTH], stats[i, cv2.CC_STAT_HEIGHT]
    cv2.rectangle(cimg, (stats[i, cv2.CC_STAT_LEFT], stats[i, cv2.CC_STAT_TOP]), 
        (stats[i, cv2.CC_STAT_LEFT] + stats[i, cv2.CC_STAT_WIDTH], stats[i, cv2.CC_STAT_TOP] + stats[i, cv2.CC_STAT_HEIGHT]), random_color(random), 2)

cv2.imwrite("4-OutputImage.jpg", cimg)

输入图像

来自阈值和反转操作的蒙版图像。

连接分量的使用。

在输入图像上叠加连通分量的输出。

检测纸上的黑色墨水斑点 - Opencv Android

Detect black ink blob on paper - Opencv Android

android

opencv

blobs

threshold

输入图像