Cách di chuyển các điểm mặt trong opencv/méo mó mặt

Question

Tôi phải mô phỏng nét mặt trên khuôn mặt (nói miệng mở). Đối với điều này tôi lần đầu tiên trích xuất các điểm tính năng trên khuôn mặt và tìm thấy các góc của đôi môi. Bây giờ tôi cần phải làm biến dạng hình ảnh bằng cách di chuyển các điểm xuống.

Trong hình trên tôi cần phải di chuyển các điểm (2) và (3) đối với một số khoảng cách trái và phải tương ứng. Và điểm (18) và (19) bit littele xuống. Vì vậy mà tôi sẽ nhận được một biểu hiện như mở miệng.

Câu hỏi của tôi:

1) Đây có phải là con đường bên phải phía trên để tiến hành mô phỏng biểu hiện trên khuôn mặt?

2) Nếu đó là đúng cách di chuyển điểm và tạo hình ảnh mới trong opencv?

Answer 1

như vậy, ở đây chúng tôi đi một lần nữa ..

tôi đã nhìn thấy rất nhiều người sử dụng delauny tam giác từ những điểm, và sau đó kết cấu cong vênh hay biến dạng trong OpenGL hoặc thậm chí opencv.

https://github.com/MasteringOpenCV/code/tree/master/Chapter7_HeadPoseEstimation

trông khá liên quan, các bộ phận của "MasteringOpencv" Cuốn sách là trên google.books

Answer 2

Một cuộc khảo sát gần đây khá và trình kỹ thuật dân đã sử dụng trong lĩnh vực này là ở đây: http://old.siggraph.org/publications/2006cn/course30.pdf

TL: DR. Không có cách "đúng" để làm điều đó, theo bất kỳ nghĩa nào tuyệt đối. Bạn cần xác định mục tiêu của mình theo cách có thể tính toán được. Sau đó, tìm ra thông tin bổ sung (trước) bạn cần để tiếp cận thông tin đó, ngoài dữ liệu hình ảnh. Fiddling với "kết cấu cong vênh" hoặc kế hoạch nội suy khác trước khi bạn quyết định những gì bạn cần làm là một sự lãng phí thời gian.

Bạn đề cập đến "một biểu thức như một miệng mở", và tôi giải thích điều đó có nghĩa là bạn muốn tạo ra một hình ảnh tương tự như khuôn mặt thật sẽ trông như thế nào nếu chủ đề được chụp bằng miệng. Các dấu hiệu bạn tìm thấy rõ ràng là không cung cấp đủ thông tin về điều đó - đặc biệt, chúng không thể hiện bất kỳ khái niệm nào về "miệng". Trong thực tế, khái niệm đó không có ở đâu trong hình ảnh. Vì vậy, nói đúng, nhiệm vụ của bạn là không thể giải quyết trừ khi bạn ném thêm thông tin vào nó.

Tôi đề nghị bạn hãy xem bài báo ở trên và xem xét lại vấn đề của bạn.