방법론
41개 툴(리그 A 17 · 리그 B 24)을 같은 입력·같은 설정·같은 채점기로 잽니다. 루브릭 버전 2026.10.
독립 선언
본 연구소는 벤더의 유료 등재비를 일절 받지 않으며, 순위·점수는 공개된 방법론에 따라 산출합니다. 가격 순위는 출처·확인일이 붙은 공식·3자 가격 자료로 계산한 추정 비용이고, 측정 점수는 자체 측정을 마친 툴에만 붙습니다. 제휴 수수료는 순위·점수·노출 순서에 영향을 주지 않습니다.
유료 등재·스폰서 리스팅은 받지 않습니다. 제휴 링크는 승인된 프로그램에만 두고, 링크 바로 위에 고지를 붙입니다. 수수료는 순위·점수·표시 순서에 영향을 주지 않습니다.
측정 프로토콜
- 리그 A(클리퍼·자막): 같은 원본(한국어 3편·일본어 3편, 각 3~5분, 빠른 말·은어·고유명사 포함, 대본=정답). 1차는 자체 녹음(동의서), 2차는 공공누리 1유형.
- 리그 B(생성형): 같은 8-Beat 표준 프롬프트 10종 × 같은 설정(5초·720p·9:16).
- 툴당 케이스마다 최대 5회 생성. 성공 기준(화질 깨짐·외계어·싱크 300ms 초과면 실패)을 미리 적고 매 시도를 기록합니다. 실패해도 크레딧이 차감되는 툴은 「실패 과금」으로 표시합니다.
- 유료 플랜으로만 측정합니다(무료 티어의 워터마크·상업권 문제 때문). 모든 수치에 확인일·플랜·출처를 적고, 미측정은 "—"입니다.
- 입력 소재는 CC BY(Big Buck Bunny·Sintel·Tears of Steel)·Pexels·Pixabay·공공누리 1유형만 씁니다. 입력 클립 내려받기 버튼은 두지 않습니다.
- 약관상 결과물 공개가 불가한 툴(예: PixVerse 출력 보류)은 영상과 점수를 내지 않고 주석만 남깁니다. 🔒 Luma 이용약관 3.4(g)는 벤치마크·성능 정보 게시를 금지합니다. 서면 허가 전까지 정량 점수는 잠금 상태이며 정성 리뷰만 공개합니다. 출처
KO·JA 현지화 스코어카드 9항목 (0~100)
| # | 항목 | 측정법 |
|---|---|---|
| 1 | 문자 오류율(CER) | 툴 자막 vs 대본, 자체 구현(정규화 규칙 공개) |
| 2 | 고유명사 오역 수 | 케이스별 체크리스트(사전 공개) 대조 |
| 3 | 은어 오역 수 | 케이스별 체크리스트 대조 |
| 4 | 환각 문장 수 | 대본에 없는 문장 수 |
| 5 | 싱크 밀림(ms) | 기준 = Azure Speech 단어 타임스탬프 정렬, 중앙값·최댓값 |
| 6 | 줄바꿈 규칙 위반 수 | 행두 금칙 문자·단어 중간 절단·2줄 초과 검사기 |
| 7 | CJK 폰트 깨짐 | 렌더 프레임에서 □ 검출 + 폴백 폰트 여부 |
| 8 | 워터마크 제거 조건 | 플랜별 조건(약관·실측) |
| 9 | 해지·환불 난이도 | 약관 조항 점수 + Trustpilot 1성 비율 |
9항목 중 하나라도 비어 있으면 총점을 내지 않고 순위에서 제외합니다. 한국어는 엔진 기준선부터 불리합니다(FLEURS WER 일본어 7.8% vs 한국어 14.5%) — 그래서 가장 오래 비어 있을 자리입니다.
TCO 수식
clips_per_short = ceil(short_sec / clip_sec) gens = N_shorts × clips_per_short × R (R = 재시도 배수 1~5) billed_gens = gens (실패 과금 툴) | N_shorts × clips_per_short (성공분만 과금) credits_needed = billed_gens × credits_per_clip cost = min( ceil(credits_needed / plan_credits) × plan_price, 종량 경로 ) per_short = cost / N_shorts → USD · KRW · JPY (환율 기준일 병기)
웹 계산기와 서버 쪽 수식은 같은 고정 벡터로 교차 검증합니다. 클리퍼는 60분 원본 1편 → 완성 숏 5개 단가로 통일합니다.