Były poprzednie pytania (tutaj, tutaj itutaj) związane z moim pytaniem, jednak moje pytanie ma inny aspekt, którego nie widziałem w żadnym z wcześniej zadanych pytań.

Uzyskałem zestaw danych do moich badań za pomocą czujnika głębokości Kinect. Ten zestaw danych ma format .png obrazów zarówno dla głębokości, jak i dla strumienia rgb w określonym momencie. Aby uzyskać więcej pomysłów poniżej, są ramki:

EDYCJA: Dodaję tutaj wyjście wykrywania krawędzi.

Wyjście wykrywania krawędzi Sobel dla:

Obraz RGB

Głębokość obrazu

Teraz próbuję wyrównać te dwie ramki, aby uzyskać połączony obraz RGBZ.

Nie mam wiedzy na temat podstawowych cech aparatu ani odległości między czujnikami rgb i podczerwieni.

Czy istnieje metoda, którą można zastosować, aby dopasować wartości RGB do odpowiednich wartości Z?

Jednym z pomysłów, które mam, jest użycie krawędzi na obu obrazach i próba ich dopasowania.