1 Thu

GARIGO : Face Mosaic Project

유사도 Part 1.

878KB

미디어1.mp4

• 다음 영상을 보면(깃북은 동영상이 안되는 구나..) 다음과 같은 문제가 발생한다.

• 매우 비슷하게 보이는 신에서 어떤 신은 사전에 학습된 인물로 판단하고 다른 신에서는 학습되지 않은 인물로 판단해서 모자이크 되는 것이다.

• 이는 매 신마다 detect와 recognize가 이루어지기 때문이다.

• 유사한 신마다 이러한 작업이 이루어지면 두 가지 단점이 있다.

  • 한 장면에서 잡은 얼굴을 다른 장면에서 못잡음

  • 비슷한 장면을 매번 detect+reco 함

• 따라서 유사한 신이라고 판단할 수 있어야 하고 이 기준을 만족한다면 매번 rec 하지 않도록 한다. 매번 det는 해야한다. 유사한 신이라도 미세하게 얼굴의 위치는 계속 바뀌기 때문. 얼굴 위치를 고정하는 것이 아니라 이 사람이 누구였는지를 고정할 필요가 있다.

• 다음은 맨 위에있던 4개의 프레임을 합친 결과물이다.

• 매 신이 굉장히 비슷함을 알 수 있다.

  • 얼굴과 몸의 윤관이 번진것은 그만큼 위치가 변경되었다는 뜻.

• 다음과 같은 기준을 만족하면 동일 인물이라고 간주한다.

  • 다음 프레임이 이전 프레임과 유사한가?

    • 이 기준은 Part2. 에서 유사도 함수를 사용할 것임

  • 인식된 얼굴의 위치가 다음 프레임의 위치와 가까운가?

    • 마찬가지.