4. 실험결과

최종 평가 방식

• 아래 알고리즘을 각각 적용한 다음 AI 모델의 정확도를 확인하여 알고리즘의효용성을 검증함

  • Frame Fusion 적용 영상

  • Low-Light Enhancement 적용 영상

평가 결과

• Frame fusion 적용 영상

  • 빛 반사가 일부 제거 되었지만 Ghost 현상등으로 이미지가 전체적으로 흐려지면서 돌고래에 대한 인식률이 전반적으로 내려감

  • 그외 흰색 선박의 경우 빛 반사로인해 검출율이 떨어지는 부분이 개선됨을 확인 함

• low-light enhancement 적용 영상

  • Ghost 현상의 문제는 없지만 일반 영상과 정량적으로 크게 차이가 나지 않음

  • 또한 일반화 성능을 위해 파라미터를 조정한 이후 적용전과 거의 동일하게 측정되고 있음을 확인하였음

  • 최종적으로 정성적인 변화는 있어 보이지만 정량적인 변화는 크게 유의미 하지 않음을 확인함

Bright Frame Fusion 적용 결과(돌고래 못잡는 케이스)

test_set	recall(ship)	recall(dolphin)	recall(jetski)	precision(ship)	precision(dolphin)	precision(jetski)	f1(ship)	f1(dolphin)	f1(jetski)	AP50(ship)	AP50(dolphin)	AP50(jetski)	AP50-95(ship)	AP50-95(dolphin)	AP50-95(jetski)	mAP50	mAP50-95
remove_brightness	0.92	0.5	0.5	0.966	0.5	0.5	0.942	0.5	0.5	0.5	0.5	0.5	0.865	0.5	0.5	0.856	0.7