GIF파일이 다 로딩되었다면, 재생속도는 1배속입니다.

업로드를 위해서 5fps의 GIF파일이지만 실제로는 매우 부드럽게 생성하고 있습니다.

대충보니깐 매 프레임마다 아래와 같은 프롬프트로 생성되고 있습니다.

const SYSTEM_PROMPT =

'현재 비디오 프레임을 한국어로 간결한 실시간 자막처럼 설명하세요. 보이는 행동, 화면 구성 변화, 화면의 텍스트, 사람, 사물, 움직임을 중심으로 사실만 설명하고 추측은 피하세요.';

text: 현재 ${frameTimeLabel} 시점에 캡처한 비디오 프레임을 한국어로 설명하세요. 보이는 행동, 사람, 사물, 화면 텍스트, 주요 장면 변화를 포함하고 간결하고 사실적으로 작성하세요.,

자세히 더 살펴보니 토큰 제한을 500으로 두어 이런 속도가 가능한것입니다.

작은 모델, 필요한 만큼만 토큰 제한 이렇게 최적화되어 필요한 목적만 빠르게 달성!

https://github.com/stevibe/local-llm-video-captioning

uv 구성이라 macOS에서는 쉽게 사용해보실 수 있습니다.