Xác định xoay máy ảnh giữa hai hình ảnh toàn cảnh 360x180 equirectangular

Question

Tôi có n khung hình ảnh toàn cảnh 360x180. Tôi muốn xác định vòng quay của máy ảnh dựa trên sự so sánh giữa hai hình ảnh tuần tự. Đối với dự án này, nó an toàn để giả định rằng tất cả các tính năng có thể nhìn thấy trong các hình ảnh là vô cùng.

Tôi là người mới (hôm nay) đến OpenCV và chắc chắn cần phải đọc nhiều hơn. Tôi có một ứng dụng sẽ tìm KeyPoints bằng cách sử dụng SIFT hoặc SURF, nhưng tôi không chắc chắn về cách tiếp tục từ đây.

Cảm ơn

Answer 1

Để tìm luân chuyển giữa để hình ảnh mà bạn cần phải biết định hướng của cả hai, và do đó, các pose. Để tính toán máy ảnh, bạn cần phải tìm số homography chuyển đổi từ các điểm chính phù hợp với.

Hãy tưởng tượng bạn biết hướng của khung và vị trí đầu tiên, bởi vì bạn quyết định tùy ý. Bạn có các điểm chính được trích xuất bởi SIFT. Từ đây, bạn có các bước tiếp theo:

1- Trích xuất các điểm chính từ khung tiếp theo.

2- Tìm các kết quả phù hợp của các điểm chính trên cả hai khung.

3- Sử dụng RANSAC để tìm các thiết lập tốt nhất của inliers/giá trị ngoại biên của phù hợp cho bước tiếp theo

4- Sử dụng DLT (Direct Lienar Transform) với thiết lập rằng, điều này sẽ sử dụng 4 trận đấu tới tìm homography giữa các hình ảnh.

5- Khi bạn có bản đồ, bạn có thể trích xuất tư thế và xoay vòng.

Bạn có chức năng openCV cho tất cả các bước ngoại trừ pose from homography.