https://gall.dcinside.com/m/helldiversseries/679395

한국어 더빙 모드 프로젝트 근황여러므로 더빙모드를 잘 써줘서 고맙다최근에 고민이 있었음 더빙모드를 유지보수 할 사람이 나밖에 없는데 신규더빙 제작하기에는 시간이 없음하지만 제작에 공수가 존나 들어서 좀 빡셈제작 과정은 이럼원본음성 스크립트 분석 -gall.dcinside.com


이 글 부터 이어짐


다른 헬붕이의 아이디어 덕에 머리속으로 구상만 하던 완전 자동화를 대부분 실체화 할 수 있게 됐음


내가 원하던 자동화 시스템은 원본 음성을 공식 자막에 맞게 성별까지 분류하고 지정해둔 ai보이스로 자동으로 녹음해서 마무리 작업


까지 구현하는게 목표였는데 구현에는 성공함



구현은 성공했는데 퀄리티 문제 때문에 어쩔수 없이 완전 자동화는 포기했지만 거의 대부분 자동화 시킴





먼저 위 이미지처럼 게임내 공식 자막파일을 성공적으로 추출해서 영어와 한국어를 통합화 하는 과정을 거치고 라이브러리로 만듬


음성을 ai가 듣고 영문 스크립트로 변환할때 여기 공식 자막에 있는 영문을 찾으면 바로 한글 공식 자막으로 변환되게 제작했음





그리고 위 이미지처럼 기존에 작업할때 cpu로 작업하는걸로 만들었음 10초에 대사 하나 정도로 그래도 빠르다 싶었는데


RTX 5070TI 성능 테스트나 하자 하고 바로 환경 구축해서 바로 분류 작업에 투입해봤음



투입결과





속도 보자마자 바로 섹스 소리 나오더라


정확도는 대충 95퍼 정도 였고 뭔가 이상한게 있다 싶으면 유저들이 자막을 구글시트에 올려둬서 그걸로 보고 고치면 됐음


 

음성에 따라 남성 여성 분류하는것도 구현은 했는데 목소리 피치 정확도가 70퍼 밖에 안돼서 그냥 폐기함


 


ai로 제작한 한국어 음성을 다운로드하면 저렇게 파일명으로 저장되는데 제작한 스크립트를 실행하면




이런식으로 숫자로된 원본 파일명을 복사해서 그대로 한국어로 분류 및 모드 제작에 쉽게 별도 파일들만 모이게 끔 제작했음


더빙 자동화도 구현은 했는데 상황에 맞는 감정을 ai가 읽지를 못해서 아쉽지만 폐기


그래도 이제 듣고 더빙 파일 제작만 내가 하면 됨


나머지는 싹다 자동화 시켜둬서 이제 유지보수 및 신규 더빙 제작 시간이 20배는 빨라진거 같음


대사 100개 정도 만드는데 한 4일에서 5일 걸렸는데 이제는 1000개 제작하는데 2일이면 가능할지도?



암튼 도움준 헬붕이에게 감사하다고 말해주고 싶고 더빙모드는 더 좋게 만들어서 조만간 배포할게