Ước lượng ma trận theo dõi 2D-3D

Question

Tôi đang làm việc với Kinect của mình về một số xử lý hình ảnh 3D 2D. Đây là vấn đề của tôi: Tôi có điểm trong 3D (x, y, z) nằm trên một mặt phẳng. Tôi cũng biết tọa độ của các điểm trên ảnh RGB (x, y). Bây giờ tôi muốn ước tính ma trận ma trận 2D-3D để ước lượng (x1, y1, z1) tọa độ đến một điểm ngẫu nhiên (x1, y1). Tôi nghĩ điều đó là có thể, nhưng tôi không biết bắt đầu từ đâu.

Cảm ơn!

Answer 1

Những gì bạn đang tìm kiếm là camera projection matrix, không phải là homography. Một homography ánh xạ một mặt phẳng nhìn từ một chiếc máy ảnh đến cùng một mặt phẳng nhìn từ chiếc máy bay khác.

Để ước tính ma trận máy ảnh, tìm kiếm các giải pháp để giải quyết tư thế máy ảnh từ các điểm tương ứng đã biết. Để giúp bạn bắt đầu, a seminal paper về chủ đề và triển khai OpenCVsolvePnP.