c++ - OpenCV:为什么 Haar 分类器只检测一张脸和一只眼睛？

我绝对是 OpenCV 和 Haar 分类器的新手。我复制了以下代码，它基本上工作正常，但它只返回一张脸和一只眼睛。第二只眼睛和另一张脸呢？

    const char[] eyesCascadeFilename = "haarcascade_eye.xml";
    const char[] faceCascadeFilename = "haarcascade_frontalface_alt2.xml";
    const int HaarOptions = CV_HAAR_DO_ROUGH_SEARCH;

    // prepare the image for fast processing
    Mat grayImage;
    cvtColor(colorImage, grayImage, CV_BGR2GRAY);
    equalizeHist(grayImage, grayImage);

    // detect the faces on the image
    std::vector<cv::Rect> faces;
    faceCascade.detectMultiScale(grayImage, faces, 1.1, 2, HaarOptions, cv::Size(60, 60));

    for (int i = 0; i < faces.size(); i++) {
        // visualize the faces
        cv::Point pt1(faces[i].x + faces[i].width, faces[i].y + faces[i].height);
        cv::Point pt2(faces[i].x, faces[i].y);
        cv::rectangle(colorImage, pt1, pt2, cvScalar(0, 255, 0, 0), 1, 8 ,0);
        // detect the eyes within the facial roi
        cv::Rect rect(faces[i].x, faces[i].y, faces[i].width, faces[i].height);
        cv::Mat roi = grayImage(rect);
        std::vector<cv::Rect> eyes;
        // here's a problem ...:
        eyesCascade.detectMultiScale(roi, eyes, 1.1, 2, HaarOptions, cv::Size(30, 30));
        //eyesCascade.detectMultiScale(roi, eyes);
        for (int i = 0; i < eyes.size(); i++) {
            // visualize the eyes
            cv::Point pt1(faces[i].x + eyes[i].x + eyes[i].width, faces[i].y + eyes[i].y + eyes[i].height);
            cv::Point pt2(faces[i].x + eyes[i].x, faces[i].y + eyes[i].y);
            cv::rectangle(colorImage, pt1, pt2, cvScalar(0, 210, 255, 0), 1, 8 ,0);
        }

    }

这是它的样子:

最佳答案

编辑

在您的代码中，在内部 for 循环中，您实际上是在创建一个与外部 for 循环 ( i ) 的迭代变量同名的新变量。由于它们在不同的范围内，这是允许的，并且内部范围内的变量“拥有”名称。您将无法访问内部作用域内的外部作用域 i。

for 循环声明本身是 for 循环范围的一部分，因此在第二个 i 的情况下算作内部范围的一部分。

在您的情况下，这意味着您一次只能为给定的脸画一只眼睛，即使检测到两只眼睛也是如此。脸(1) 够不到眼睛(2)。您实际上很幸运，您的代码没有崩溃:这仅仅是因为您的面部和眼睛 vector 的大小相同 (2)。

在 Debug模式下，您获得 eye.size == 1 可能只是因为在特定时刻该算法只能检测到一只眼睛。在下一次迭代中，eye.size 很可能是 2。

所以，比方说，在你的内部循环中使用 int j = 0 来迭代眼睛 vector ，你会没事的!

结束编辑

这是我自己的这个算法的(工作)版本:

#include "FaceDetectionHaar.h"


FaceDetectionHaar::FaceDetectionHaar()
{
    face_cascade_name = "haarcascade_frontalface_alt.xml";
    eyes_cascade_name = "haarcascade_eye_tree_eyeglasses.xml";

    if( !face_cascade.load( face_cascade_name ) ){ printf("--(!)Error loading\n");};
    if( !eyes_cascade.load( eyes_cascade_name ) ){ printf("--(!)Error loading\n");};
}

void FaceDetectionHaar::execute(IplImage in)
{
    Mat imgMat(&in);

    std::vector<Rect> faces;
    Mat frame_gray;

    cvtColor( imgMat, frame_gray, CV_BGR2GRAY );
    equalizeHist( frame_gray, frame_gray );

    //-- Detect faces
    face_cascade.detectMultiScale( frame_gray, faces, 1.1, 2, 0|CV_HAAR_SCALE_IMAGE, Size(30, 30) );

    for( int i = 0; i < faces.size(); i++ )
    {
        Point center( faces[i].x + faces[i].width*0.5, faces[i].y + faces[i].height*0.5 );
        ellipse( imgMat, center, Size( faces[i].width*0.5, faces[i].height*0.5), 0, 0, 360, Scalar( 255, 0, 255 ), 4, 8, 0 );

        Mat faceROI = frame_gray( faces[i] );
        std::vector<Rect> eyes;

        //-- In each face, detect eyes
        eyes_cascade.detectMultiScale( faceROI, eyes, 1.1, 2, 0 |CV_HAAR_SCALE_IMAGE, Size(30, 30) );

        for( int j = 0; j < eyes.size(); j++ )
        {
            Point center( faces[i].x + eyes[j].x + eyes[j].width*0.5, faces[i].y + eyes[j].y + eyes[j].height*0.5 );
            int radius = cvRound( (eyes[j].width + eyes[i].height)*0.25 );
            circle( imgMat, center, radius, Scalar( 255, 0, 0 ), 4, 8, 0 );
        }
    }
    in = imgMat;
}

对于 ROI 部分，代码比您的代码简单得多。也许使用 Haar 选项 CV_HAAR_SCALE_IMAGE 而不是 CV_HAAR_DO_ROUGH_SEARCH 会有所帮助。

此代码大部分是 OpenCV website 上给出的代码的拷贝。您也应该尝试他们提供的 Haar Cascades xml 文件，包括面部和眼睛。

关于c++ - OpenCV:为什么 Haar 分类器只检测一张脸和一只眼睛？，我们在Stack Overflow上找到一个类似的问题：https://stackoverflow.com/questions/29173400/