[💬] 꿀팁: 영어 동영상에 한글 자막 넣는 방법

[Mr빙그레(mrbinggrae)]

유튜브, 유데미 실시간 번역 있지만 아직 번역 퀄리티가 좋지 않다. 

Whisper ai를 활용해서 소리로 자막을 만들어내고 deepl api와 팟플레이어로 자막을 한글로 번역해보자!

1. 유데미, 유튜브 다운로드

유튜브는 유튜브 프리미엄으로 오프라인에 저장하던가 각자 알아서 다운로드 받는다. (나는 4K Video Downloader+ 이용했다)

유데미는 https://chromewebstore.google.com/detail/video-downloadhelper/lmjnegcaeklhafolokijcfjliaokphfk 크롬 확장프로그램을 이용했다. 

# 다운로드한 파일은 절대 공유하지 않는다. 불법이다.

2. 코랩과 Whisper AI

영상을 다운로드 했으면 자막을 입혀보자. 참고로 영어의 경우 인식률이 매우 높다.

영상에서 음성 파일을 추출하고 코랩에서 whisper를 돌려야 한다. 참고로 집 컴이 매우 좋은 사람은 Whisper를 로컬 환경에서 돌려도 된다. 나는 750TI 할아버지 학대 중이라 코랩을 애용했다. 

https://www.youtube.com/watch?v=OyNHUONSLIs

에서 코랩으로 Wishper AI로 다운 받는 방법을 알게 되었는데 코랩의 경우 GPU 무료 구간이 너무 짧다. CPU 만으로는 너무 오래 걸린다. 

그래서 다른 구글 계정을 이용하던가, Kaggle 사이트를 이용했다. 코랩에서 사용한 코드를 그대로 가져오되 캐글은 구글드라이브 마운트가 되지 않는다. 

나는 구글 계정 만들기 귀찮아서 Kaggle에서 했다. 

!pip install gdown

!gdown --folder --id 공유 폴더 링크 아이디

!ls "/kaggle/working/youtube/srt" # 다운 되었는지 확인하고 

# 폴더 안의 mp3 파일들을 whisper로 돌린다.

for file in mp3_files:

    print(f"Whisper 변환 중: {file}")

    # Whisper CLI 호출

    !whisper "{file}" --language English --model large --task translate

그럼, 자막이 입혀진 파일은 우측의 Output에 업로드되니 다운로드 받으면 된다.

3. 실시간 번역 기능 활용하기

팟플레이어를 설치한다.

https://www.youtube.com/watch?v=EqQUWB5SHXk&t=148s

 에서 팟플레이어 최적화시키고(GPU 사용, 채도 이런 것들) 실시간 자막 입히는 방법을 익힌다.

구글 번역과 카카오 번역만 된다. deepl 번역을 하려면 api를 입력해야 한다. https://www.deepl.com/ko/pro/change-plan#developer << 결제 정보를 입력하면 한달에 50만 글자 무료로 사용 가능하다. 교육용 영상 특성상 말이 많지 않아서 괜찮다. 실시간 자막 설정 화면에서 계정 설정을 누르고 API Key를 등록하면 deepl 번역이 가능해진다. 

deepseek 등의 aI의 api key를 활용해서 번역을 할 수 있으나 유료라서 설명에서 제외했다. 

결과물: 

꽤 쓸만하다.

참고로 두 사람 이상이 짧게 대화하는 형식의 영상은 네이버 클로바 노트를 활용하면 1분 안에 자막이 입혀진다. 그 외에도 자막을 얻는 방법은 많으나 무료 구간이 짧아서 패스했다. 

[불타는키보드(1bnmaker)]

[디붕쿤(divide6198)]

[약코하는뉴비(service7755)]

[ㅇㅇ 1(14.40)]

말씀해주신 확장프로그램 깔고 유데미 영상 다운받으려고 하니까 Download failed 지원하지 않는 사이트 어쩌구 뜨는데 어떻게 받으신건가요?

[Mr빙그레(mrbinggrae)]

아... 목록에 뜨길레 되는줄 알았네요.
https://velog.io/@hiphaack/Udemy-%EA%B0%95%EC%A2%8C-%EB%8B%A4%EC%9A%B4%EB%A1%9C%EB%93%9C%EB%B2%95
이 사이트 보고 하시면 됩니다. 자막까지 깔끔하게 다운로드 받네요.

[ㅇㅇ 1(14.40)]

감사합니다 시도해볼게요