[Math] chapter 4.3 [Stereo Reconstruction: Siamese Networks]

 

Siamese Networks for Stereo Matching

Hand crafted features과 similarity metrics는 기하학적 모든 패턴을 고려하지 않습니다. 또한, 폐색 패턴을 고려하지 않습니다.

Siamese Network는 disparity maps 기반으로 CNN patch-wise 이미지를 학습합니다.

이미지간의 관계가 feature들을 dot product 하고, WTA 를 maximization하는 방법을 찾습니다.

Siamese Networks Architecture

- 각각의 Simamese 의 특징들을 보여주고 있음.. , 우리는 Cosine similarity기반임.

Training

Triplet patch로 구성된 training set의 흐름에 대해서 설명하고 있습니다. 

Loss function

Hinge Loss 에 대해서 설명하고 있음.. Hinge Loss에 따라, loss를 사용함. (추후 업로드 예정)

Result