컴퓨터 비전 - 31. 동적 비전

영상 = 동적 비전

- 움직이는 이미지를 영상 image seuqence나 동영상 video

-> 동적 비전

 

프레임

- 동영상의 각 영상

 

동적 비전이 하는일

- 영상 안의 물체 정보 추출

 

컴퓨터 비전과 3차원

- 활용가능성이 크게 늘어남

-> ex. 축구장 3차원 비전

- 아래의 그림은 2차원 사진으로부터 3차원 복원 과정을 보여줌

https://www.researchgate.net/figure/Voxel-carving-approach-for-3D-reconstruction-Process-with-4-cameras-around-the-subject_fig1_262362824

 

동적 비전의 난이도

1. 움직이는 물체 인식 -> 자동 소등 장치

2. 물체 갯수 파악 -> 교통량 측정, 동전 세기

3. 물체 추적 -> 감시

4. 물체 동작 인식 -> 감시

5. 비디오 검색 -> 이미지로 영상 찾기

6. 장면 이해 ->자율주행

 

7. 3차원 공간 재구성 ->스포츠 중계

https://www.researchgate.net/figure/Voxel-carving-approach-for-3D-reconstruction-Process-with-4-cameras-around-the-subject_fig1_262362824

 

 

 

 

영상의 특성

- 공간 일관성 spatial coherence : 특정 화소와 주위 화소가 유사

- 시간 일관성 temporal coherence : 시간의 변화에 대한 연속 영상에서의 픽셀끼리 비슷

 

 

 

동적 비전의 종류

1. 차영상

2. 모션 필드

 

 

차영상 difference image

- 시간 t와 t+1에서의 영상간의 차이 영상

 

 

 

3차원 공간의 3차원 투영

- 현실의 3차원 공간은 투영 중심을 통해 2차원 영상으로 투영됨

- 아래는 이를 간략화 한 핀홀 카메라 모델

 

 

 

 

 

모션 필드  motion field = 동작장

- 연속된 두 영상 사이의 모션 벡터 v

- 모든 점에서의 모션 벡터 v의 지도 => 모션 필드

- 아래의 예시는 이동한 사각형 사이의 모션 장을 보여줌

http://homepages.inf.ed.ac.uk/rbf/CVonline/LOCAL_COPIES/OWENS/LECT12/node3.html

 

 

모션 필드의 문제

- 물체가 가만히 있더라도 회전이나 광원 이동에 따라 모션 필드가 변할 수 있음