도구별 실전 가이드 · 공식 정보 확인 2026-08-20

SmartSub MIT 오픈소스 조건과 시작 절차

작성: gentive · 편집·검수 책임: 신유빈 · 지원 환경: Windows, macOS, Linux · 페이지 갱신: · 운영·편집 기준

로컬 음성 인식으로 영상 자막을 만들고 번역·AI 더빙·음성 복제·자막 입히기를 일괄 처리한다.

로컬 음성 인식으로 영상 자막을 만들고 번역·AI 더빙·음성 복제·자막 입히기를 일괄 처리한다. SmartSub의 첫 실전 과제는 “직접 녹화한 1분 영상에 전사 자막을 만들고 번역본을 추가한다”이며, 이 흐름을 직접 통제할 사람에게 맞습니다.

이럴 때 맞습니다

  • “한국어 튜토리얼 MP4에 영어 자막과 영어 더빙 생성” 같은 입력으로 SmartSub의 핵심 기능을 시험하려는 사람
  • 타임코드·화자 구분·번역 문장이 맞고 더빙 후 원본 배경음이 과도하게 손상되지 않았는지 확인한다. 기준으로 SmartSub 결과를 직접 검수할 수 있는 경우
  • Windows·macOS·Linux 환경에서 MIT 코드를 직접 설치·관리하려는 작업

이럴 때는 멈추세요

  • 데스크톱 앱 설치·모델 준비·업데이트를 관리하지 않고 즉시 완성된 서비스를 원하는 경우
  • 다음 위험을 사람이 확인할 수 없는 작업: 동의 없는 음성 복제는 사칭에 악용될 수 있으므로 화자 권리와 사용 범위를 먼저 확인해야 한다.

참고 시작점

팩트시트 · 작업 근거 확인 필요: 아래 문구는 공식 제품 사실을 정리한 참고 시작점이며, 성공 결과를 보장하는 검증 절차가 아닙니다.

1분 영상에서 한국어 자막을 만든다

발화 구간과 화자가 맞는 원문 자막 초안이 생성된다.

참고 시작점: 직접 녹화한 한국어 튜토리얼 MP4를 전사하고 화자와 타임코드를 표시해 줘.

  1. 영상 복사본을 불러와 한국어 Whisper 또는 FunASR 모델을 선택하고 음성 복제 옵션은 끈다.
  2. 전체 1분을 전사한 뒤 발화 시작·끝과 화자 전환을 원본 재생으로 맞춘다.
  3. 원문 자막을 확정한 다음에만 translate 작업을 추가해 영어 문장을 생성한다.

영어 자막을 영상에 입혀 검수한다

타임코드를 보존한 영어 자막이 배경음과 겹치지 않게 렌더링된다.

참고 시작점: 확정한 한국어 자막을 자연스러운 영어로 번역하고 화면 아래 안전 영역에 입혀 줘.

  1. FunASR 전사에서 고유명사와 제품 용어를 먼저 고친 뒤 번역 용어표를 잠근다.
  2. translate 결과의 큐 수와 타임코드를 원문 자막과 비교해 누락과 병합을 찾는다.
  3. burn video subtitles로 복사본 영상을 렌더링하고 줄바꿈·화면 가림·싱크를 전체 재생한다.

더빙은 동의한 시험 음성으로만 만든다

원본 배경음을 보존한 영어 더빙 시험본과 권리 기록이 남는다.

참고 시작점: 내가 사용을 허락한 시험 음성만 써서 영어 더빙을 만들고 원본 배경음은 유지해 줘.

  1. Whisper 자막과 translate 대본이 같은 의미인지 문장별로 확정하고 화자 동의 기록을 연결한다.
  2. 더빙 음량을 원본 대화 구간에만 적용한 뒤 배경음이 과도하게 줄지 않았는지 듣는다.
  3. burn video subtitles 결과와 더빙본을 별도 파일로 내보내고 동의 없는 음성 모델과 임시 샘플을 삭제한다.

무료 조건과 주의점

MIT 오픈소스 소프트웨어로 로컬 실행 횟수 제한 없음. 모델 다운로드와 GPU·전기 비용은 사용자 부담

MIT 오픈소스 소프트웨어로 로컬 실행 횟수 제한 없음. 모델 다운로드와 GPU·전기 비용은 사용자 부담

MIT 저장소 코드는 상업적으로 사용할 수 있지만, 모델 가중치·입력 자료·생성물·번들 자산의 권리는 각각 따로 확인해야 합니다.

동의 없는 음성 복제는 사칭에 악용될 수 있으므로 화자 권리와 사용 범위를 먼저 확인해야 한다.

직접 대안과 비교

  • VideoCaptioner — VideoCaptioner도 MP4를 전사한 뒤 타임코드를 유지한 번역 자막을 만들어 영상과 함께 검수할 수 있다.

공식 근거와 확인일

SmartSub 가이드의 주장별 공식 출처
확인 항목확인한 내용공식 출처·확인일
제품 정보로컬 음성 인식으로 영상 자막을 만들고 번역·AI 더빙·음성 복제·자막 입히기를 일괄 처리한다.SmartSub 공식 사이트
무료 조건MIT 오픈소스 소프트웨어로 로컬 실행 횟수 제한 없음. 모델 다운로드와 GPU·전기 비용은 사용자 부담공식 무료 정책·요금 안내
공식 코드 라이선스오픈소스 코드의 사용·수정·재배포 조건공식 코드 라이선스
공식 제품 페이지로컬 음성 인식으로 영상 자막을 만들고 번역·AI 더빙·음성 복제·자막 입히기를 일괄 처리한다.공식 제품 페이지