[AI] 영상 하이라이트 검출 관련 기술

• 영상 하이라이트 검출 관련 기술

기존 기술 (구간 탐색 기술)

• 행동 구간 검출, 영상 요약, 텍스트 기반 장면 탐색

1. 행동 구간 검출(Action Localization)

• 2~3분 길이의 영상에서 사전에 정의된 행동을 하는 구간을 탐색하는 방법

• 단점

  • 영상 길이가 매우 길면 잘 작동하지 않음
  • 모델을 학습한 도메인에만 동작한다는 한계

2. 영상 요약(Video Summarization)

• 단점
  • 지도학습 : 주관적인 기준 개입
  • 비지도학습 : 영상 내에서 시각적으로 이질적인 구간 위주로 검출

3. 텍스트 기반 장면 탐색(Moment Retrieval)

• 단점
  • 정적인 묘사에 집중하여 행동을 잘 검출하지 못함
  • 2~3분 길이의 짧은 영상 대상

행동 인식 기술

• 장점

  • 단순함
  • 높은 분류 정확도
  • 영상 길이에 무관하게 적용 가능
  • 좀 더 다양한 도메인에 적용 가능

• 단점

  • 행동의 시작점과 끝점을 정확히 검출하기 어려움