Trudności w łączeniu obrazów przy użyciu OpenCV
Obecnie pracuję nad łączeniem obrazów za pomocą OpenCV 2.3.1 w Visual Studio 2010, ale mam pewne problemy.
opis problemu Próbuję napisać kod do łączenia wielu obrazów pochodzących z kilku kamer (około 3 ~ 4), i, e, kod powinien kontynuować wykonywanie zszywania obrazów, dopóki nie poproszę go o zatrzymanie.
Oto co zrobiłem do tej pory: (Dla uproszczenia zastąpię część kodu tylko kilkoma słowami)
1.Reading frames(images) from 2 cameras (Currently I'm just working on 2 cameras.)
2.Feature detection, descriptor calculation (SURF)
3.Feature matching using FlannBasedMatcher
4.Removing outliers and calculate the Homography with inliers using RANSAC.
5.Warp one of both images.
W kroku 5. śledziłem odpowiedź w następującym wątku i zmieniłem tylko niektóre parametry:Łączenie 2 obrazów w opencv
Jednak wynik jest okropny. Właśnie przesłałem wynik na youtube i oczywiście tylko ci, którzy mają link, będą mogli go zobaczyć.
Mój kod jest pokazany poniżej: (Pokazane są tylko kluczowe części)
VideoCapture cam1, cam2;
cam1.open(0);
cam2.open(1);
while(1)
{
Mat frm1, frm2;
cam1 >> frm1;
cam2 >> frm2;
//(SURF detection, descriptor calculation
//and matching using FlannBasedMatcher)
double max_dist = 0; double min_dist = 100;
//-- Quick calculation of max and min distances between keypoints
for( int i = 0; i < descriptors_1.rows; i++ )
{
double dist = matches[i].distance;
if( dist < min_dist ) min_dist = dist;
if( dist > max_dist ) max_dist = dist;
}
(Draw only "good" matches
(i.e. whose distance is less than 3*min_dist ))
vector<Point2f> frame1;
vector<Point2f> frame2;
for( int i = 0; i < good_matches.size(); i++ )
{
//-- Get the keypoints from the good matches
frame1.push_back( keypoints_1[ good_matches[i].queryIdx ].pt );
frame2.push_back( keypoints_2[ good_matches[i].trainIdx ].pt );
}
Mat H = findHomography( Mat(frame1), Mat(frame2), CV_RANSAC );
cout << "Homography: " << H << endl;
/* warp the image */
Mat warpImage2;
warpPerspective(frm2, warpImage2,
H, Size(frm2.cols, frm2.rows), INTER_CUBIC);
Mat final(Size(frm2.cols*3 + frm1.cols, frm2.rows),CV_8UC3);
Mat roi1(final, Rect(frm1.cols, 0, frm1.cols, frm1.rows));
Mat roi2(final, Rect(2*frm1.cols, 0, frm2.cols, frm2.rows));
warpImage2.copyTo(roi2);
frm1.copyTo(roi1);
imshow("final", final);
Co jeszcze powinienem zrobić, aby lepiej szyć?
Poza tym, czy rozsądne jest, aby matryca Homografii została naprawiona, a nie utrzymywała ją? Chodzi mi o to, aby samemu określić kąt i przemieszczenie między dwoma kamerami, aby uzyskać macierz homografii, która zaspokoi to, czego chcę.
Dzięki. :)