해당 픽셀을 계산합니다

Question

두 대의 카메라로 컴퓨터 비전이 설정되어 있습니다. 이 카메라 중 하나는 비행 카메라의 시간입니다. 그것은 모든 픽셀에서 장면의 깊이를줍니다. 다른 카메라는 표준 카메라로 장면의 색상 이미지를 제공합니다.

깊이 정보를 사용하여 색상 이미지에서 일부 영역을 제거하고 싶습니다. 우리는 컬러 이미지에서 객체, 사람 및 손 추적을 계획하고 비행 카메라 시간의 도움으로 멀리 떨어진 배경 픽셀을 제거하고 싶습니다. 카메라를 병렬 설정으로 정렬 할 수 있는지 아직 확실하지 않습니다.

계산에 OpenCV 또는 MATLAB을 사용할 수 있습니다.

나는 정류, epipolargeometry 등에 대해 많이 읽었지만 모든 픽셀에 대한 서신을 계산하기 위해 취해야 할 단계를 보는 데 여전히 문제가 있습니다.

어떤 접근법을 사용할 수 있습니까? 어떤 단계에서 문제를 나누겠습니까? 어딘가에 튜토리얼이나 샘플 코드를 사용할 수 있습니까?

업데이트 장면에 배치 된 알려진 마커를 사용하여 자동 교정을 수행 할 계획입니다.

Answer 1

강력한 서신을 원한다면 고려해야합니다 체로 치다. MATLAB에는 몇 가지 구현이 있습니다. Vedaldi-Fulkerson VL Feat Library.

만약 너라면 진짜 빠른 성능이 필요합니다 (그리고 당신은 그렇지 않다고 생각합니다) Opencv'에스 서핑 탐지기.

다른 질문이 있다면 물어보십시오. 이 다른 대답 내 것이 유용 할 수 있습니다.

추신: 서신에 따라 두 이미지 모두에서 동일한 3D 지점의 투영 좌표를 찾고 있다고 가정합니다. (i,j) 픽셀의 u_A 이미지 A와 u_B 3D에서 동일한 지점의 투영 인 이미지 B에서.