将 MatofKeypoint 从 Java 作为向量<Keypoint> 传递给 c++ - opencv

Question

我在一个涉及 Java 和 C++ 代码的项目中使用 OpenCV4Android。我正在使用 FAST 特征检测器使用 OpenCV 的 Java API 在图像中查找关键点。我需要将其输出（关键点集）传递给本机 C++ 方法，该输出是 Java 中的 MatofKeypoint 对象。在 C++ 方法中，我需要将它用作向量，以便我可以从中提取关键点描述符。

我通过了 MatofObject 形式 java 并将其作为 C++ 中的 Mat& 接收，然后手动尝试通过手动读取所描述的每个点将 Mat& 转换为矢量 here。但是每次我使用致命信号 11，代码 1 访问接收到的 Mat& 对象时，程序都会崩溃。

我怀疑问题是由于 C++ 和 Java API.

使用的数据结构不同所致

任何帮助将不胜感激，谢谢！！！

在Java

public native void processImage(long matAddrTemplateKeypoints); // Native Method definition
FeatureDetector detector = FeatureDetector.create(FeatureDetector.FAST);
MatOfKeyPoint templateKeypoints = new MatOfKeyPoint();
detector.detect(img1, templateKeypoints);
processImage(templateKeypoints.getNativeObjAddr()); // Native method Call

在 C++ 中

JNIEXPORT void JNICALL MainActivity_processImage(JNIEnv*, jobject, jlong matAddrTemplateKeypoints)
Mat& templateKeypointMat = *(Mat*) matAddrTemplateKeypoints; // Casting received MatofPoint object as a Mat&

for(int i=0;i<templateKeypointMat.rows; i++){ // Code crashes here
...
}

Answer 1

在 opencv-internal 论坛中发布了一个答案：http://answers.opencv.org/question/30869/how-to-pass-a-matofkeypoint-and-matofpoint2f-to-native-code-opencv-4-android/

这是KeyPoint和DMatch转换的代码：

// C++ / JNI
// vector_KeyPoint converters
using namespace cv;
using namespace std;

void Mat_to_vector_KeyPoint(Mat& mat, vector<KeyPoint>& v_kp)
{
    v_kp.clear();
    assert(mat.type()==CV_32FC(7) && mat.cols==1);
    for(int i=0; i<mat.rows; i++)
    {
        Vec<float, 7> v = mat.at< Vec<float, 7> >(i, 0);
        KeyPoint kp(v[0], v[1], v[2], v[3], v[4], (int)v[5], (int)v[6]);
        v_kp.push_back(kp);
    }
    return;
}

void Mat_to_vector_DMatch(Mat& mat, vector<DMatch>& v_dm)
{
    v_dm.clear();
    assert(mat.type()==CV_32FC(4) && mat.cols==1);
    for(int i=0; i<mat.rows; i++)
    {
        Vec<float, 4> v = mat.at< Vec<float, 4> >(i, 0);
        DMatch dm((int)v[0], (int)v[1], (int)v[2], v[3]);
        v_dm.push_back(dm);
    }
    return;
}

void Vector_KeyPoint_to_Mat(vector<KeyPoint>& v_kp, Mat& mat)
{
    int count = (int)v_kp.size();
    mat.create(count, 1, CV_32FC(7));
    for(int i=0; i<count; i++)
    {
        KeyPoint kp = v_kp[i];
        mat.at< Vec<float, 7> >(i, 0) = Vec<float, 7>(kp.pt.x, kp.pt.y, kp.size, kp.angle, kp.response, (float)kp.octave, (float)kp.class_id);
    }
}

void Vector_DMatch_to_Mat(vector<DMatch>& v_dm, Mat& mat)
{
    int count = (int)v_dm.size();
    mat.create(count, 1, CV_32FC(4));
    for(int i=0; i<count; i++)
    {
        DMatch dm = v_dm[i];
        mat.at< Vec<float, 4> >(i, 0) = Vec<float, 4>((float)dm.queryIdx, (float)dm.trainIdx, (float)dm.imgIdx, dm.distance);
    }
}

我只是在一些示例中尝试过它，它对我来说效果很好。

将 MatofKeypoint 从 Java 作为向量<Keypoint> 传递给 c++ - opencv

Pass MatofKeypoint from Java to c++ as vector<Keypoint> - opencv

java-native-interface

android

opencv

opencv4android