![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnailc5dc6913-11cf-4a91-9892-3a1c639aa321)
영상 콘텐츠 번역 자막을 만드는 **자메이크** 외에도, 보이스루는 번역에 필요한 여러 서비스를 운영하고 있습니다. 웹툰, 웹소설, 게임까지 번역하는 프리미엄 번역 서비스 **파노플레이**, 번역을 더 편하게 할 수 있도록 돕는 에디터 **밍글로**, 그리고 번역물과 번역가를 관리하는 플랫폼 **토투스**까지. 요즘 생성형 AI다, 뭐다 해서 날로 똑똑해지는 자동 번역 기능을 십분 활용한 서비스도 많이 나오고 있는데, 보이스루는 왜 이렇게 자동 번역기술보다도 '번역 잘하는 환경 만들기'에 진심인 것일까요? 이번 인터뷰에서는 보이스루의 CTO 승현님과 함께 보이스루의 **TMS(Translation Management Solution)** 에 대한 이야기를 들려드릴게요!

* * *

### **Q. 안녕하세요, 자기소개 부탁드리겠습니다.**
승현 : 안녕하세요, 보이스루의 CTO 윤승현 입니다. 자메이크와 토투스 등 보이스루의 모든 서비스 개발을 책임지고 있습니다.

### **Q. 보이스루는 번역을 하는 것 외에도 번역가를 위한 플랫폼과 에디터까지 다양한 서비스를 고민하고 있는데요, TMS의 시작을 들려주실 수 있나요?**
승현 : 보이스루는 콘텐츠를 세계로 퍼트리기 위해 콘텐츠 번역을 하고 있습니다. 유튜브, OTT 영상, 웹툰, 웹소설 등 여러 장르의 콘텐츠를 각국의 언어로 번역하고 있죠. 작업 관리 관점에서 **번역 산업은 소프트웨어 개발과 프로세스가 매우 닮아있습니다.** 개발 조직의 PM이 제품 기획과 관리를 담당하고 FE, BE, Designer 각각의 업무를 할당하는 것처럼 번역 프로세스도 **번역 PM이 번역의 모든 과정을 기획하고 번역가, 검수자, 식자 작업자 등을 관리합니다.**

번역 이야기로 더 들어가 보면, 번역 프로세스는 여러 단계로 구성되어 있는데요. 웹툰 번역의 경우 웹툰의 텍스트를 번역하는 번역 단계, 번역 결과를 다듬는 윤문 단계, 번역된 글과 원본 웹툰을 번역 웹툰으로 만드는 단계인 식자, 최종 결과물을 검수하는 QA 단계까지 번역 PM이 모두 관리해야 합니다. 

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnail24853fb5-a06c-401d-826e-cb9de2b35dc5)

각 프로젝트는 여러 단계의 업무로 구성되어 있고 여러 프로젝트에 동일한 번역가가 할당되기도 합니다. (한 명의 번역가가 월요일과 화요일에는 프로젝트 A에 할당되고, 수요일과 목요일에는 프로젝트 B에 할당되는 방식입니다.)
PM이 번역 프로젝트를 할당하려면 번역가의 번역가의 현재 업무 상태와 스케줄을 확인해야 하는데요. 이때 각 단계에서 지연이 발생하기도 하고, 단계별 담당자와 소통하는데 상당한 시간이 소요되기도 합니다. **회사 규모가 커지는 만큼 PM이 관리해야 하는 프로세스의 복잡도도 커지고 있어요.**

소프트웨어 개발에는 'JIRA'와 같은 소프트웨어 개발 프로세스 솔루션이 존재하는데요. 팀의 규모가 커질수록, 그리고 운영 기간이 길어질수록 복잡한 프로세스 운영과 히스토리 관리를 위해서는 개발 프로세스 솔루션 도입이 필수입니다. **보이스루의 번역 프로세스 솔루션에는 'JIRA'와 같은 역할로 TMS(Translation Management Solution) 가 있습니다.**

### **Q. 보이스루의 TMS에 대해서 더 자세히 들려주실 수 있나요?**

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnail8292c12f-4502-4092-a7ac-cb9c5bb8dbb9)
승현 : TMS 솔루션은 번역을 위한 에디터는 물론 프로젝트의 진행 정도를 한눈에 파악할 수 있도록 번역 담당자 , 번역물 파일 등을 PM이 중앙에서 관리합니다. JIRA 의 이슈 기능처럼 각 단계가 완료되면 프로젝트의 다음 단계로 자동 이동 및 관리하는 워크플로우를 제공합니다.

**TMS를 통해 번역 PM의 작업 관리 효율은 향상됩니다.** 특히 여러 프로젝트를 동시에 운영할 때 번역 프로젝트 담당자의 일정 관리와 프로젝트 히스토리 관리 기능은 필수이죠. **보이스루의 TMS ver.1인 밍글로(Minglo)** 는 자메이크의 유튜브 영상 번역물을 생성, 관리하는 TMS를 목적으로 만들어진 번역기술입니다. 자메이크에 들어온 번역 요청을 작업자가 설치한 밍글로 App에 전송하여 작업물을 분배하고, 작업 완료 시 자동으로 납품되는 프로세스를 제공합니다. 작업자 구인부터 작업물 납품까지 모든 과정을 각각의 태스크로 진행했던 기존 방식에 비해 중간 관리자인 PM의 공수를 절약할 수 있었습니다. **현재 번역 PM은 TMS를 통해 기존 대비 5배 더 많은 양의 프로젝트를 관리하고 있어요.**

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnaile655362f-d482-47ca-8f60-5322d6470316)
**토투스(totus)는 보이스루의 TMS ver.2 입니다.** TMS ver.1인 밍글로를 2년 동안 운영한 경험을 토대로 Mercury 프로젝트를 진행했는데요. 영상 번역 외에 웹툰, 웹소설 등 번역 영역이 확장되면서 다양한 번역 형태에 대한 관리가 필요해졌어요. 
토투스는 다양한 번역 프로세스와 번역 대상이 바뀌는 등의 여러 특이 케이스를 처리하기 위해 개발됐는데요. 이제 번역 PM은 기존 밍글로에서 불가능했던 다양한 번역 형태와 변칙적인 번역 프로세스를 설계할 수 있게 되었고, 원본 번역물이 재편집되거나 수정되는 일이 발생하더라도 번역을 이어 나갈 수 있게 되었습니다. 
번역 PM에서 변경이 필요한 상황이 발생하면 TMS 내 PM으로 요구사항을 접수하고, BE* 의 API 개발, FE* 의 Front 개발이 이뤄지는 효율적인 프로세스가 구축되었습니다.
**더 다양한 번역을 위해 더 쉽고 빠르게 조립할 수 있는 번역판이 만들어졌다고 생각하면 편할 것 같아요!**
* BE(Back-end Engineer) : 백-엔드 엔지니어, 웹 개발 영역 중 사용자가 필요로 하는 정보를 전달하고 서버를 구축하는 개발자_출처 : 코드스테이츠
* FE(Front-end Engineer) : 프론트-엔드 엔지니어, 웹 개발 영역 중 시각적으로 보이는 영역을 구축하는 개발자_출처 : 코드스테이츠


### **Q. TMS를 도입하면서 가장 크게 바뀐점이 있다면?**
![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnail71ea7a01-031c-42d3-8747-4ab82ee0837c)
승현 : TMS 도입 전, 번역 관련 데이터는 Google Sheets, Excel 등 다양한 도구와 형태로 번역 PM이 개별 관리해왔습니다. 각 번역 PM마다 필요한 데이터 형태로 데이터를 관리했었는데요. 데이터의 형태 변경이 필요할 때마다 각각의 PM이 한글, 엑셀 등 여러 형태의 파일로 수정하고 있었어요. **TMS 도입 이후 프로젝트 데이터가 일원화되며 관리가 더 용이해졌습니다.**

그런데 번역 PM 입장에서 개별적으로 파일을 관리하는 것보다 분명 효율성은 커졌지만, TMS 개선 작업이 숙제로 남았습니다. 토투스 TMS에 의존적으로 번역 프로세스가 변경되면서 **TMS의 업데이트 속도가 결국 회사 비즈니스의 발전 속도에 비례하는 상황이 발생했는데요.**

기획 단계에서 번역 PM의 요구사항을 미리 잘 분석해 시스템을 개발하는 것도 방법이지만, 요구사항 분석을 아무리 잘하더라도 사용자 UI 상 프로세스 변경 요청은 자주 발생합니다. 또 계속 성장하는 비즈니스에 따른 서비스 변경 사항과 번역기술의 향상은 필연적으로 요구되죠. 여러 프로젝트를 경험해 보신 분들은 충분히 공감하실 거라 생각해요...

* * *

콘텐츠 번역을 위한 소프트웨어 개발 솔루션의 필요성에서 출발한 보이스루의 TMS 소개와 그 개발 과정을 소개했습니다. TMS를 통해 콘텐츠 번역 프로세스를 일원화, 자동화하고 이를 통해 번역 PM이 보다 편리하게 프로젝트를 관리할 수 있게 되었어요. 하지만 점점 TMS에 대한 개선사항이 늘어나고, TMS의 업데이트 속도가 곧 번역기술의 향상, 서비스의 발전 속도로 이어지는 한계점을 발견한 보이스루 테크팀은 보다 빠르고 쉽게 TMS를 관리할 수 있는 방법을 고민하게 되는데요.

'자막 잘 만드는 환경 만들기'에 진심인 보이스루의 번역기술 이야기는 다음 편에서 이어집니다.
 
 

* * *
 
잠깐! 자메이크가 처음인가요? 첫 자막은 반값에 달아보세요! 신규 가입자 쿠폰팩 증정! <a href="https://jamake.io/ko/signUp?utm_source=insight&utm_medium=insight&utm_campaign=insight_to_signup">
<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail164e355b-a3c7-49a1-821f-79f2a595f8bf" style="width:100%; !important; height: 100%;" alt="Clickable Image"></center>

생성형 ai가 따라올 수 없는 자메이크의 번역 기술, TMS를 소개합니다.

보이스루는 번역만 하는 것이 아니에요. 번역가들을 관리하고 번역을 더 쉽게 할 수 있는 환경을 만드는 데에도 힘쓰고 있는데요. 웹 콘텐츠, 웹툰을 위한 번역 에디터부터 번역가들의 정산, 관리를 일원화 하는 기술  TMS에 대해 소개합니다!

보이스루의 번역 기술, TMS를 소개합니다.

[인터뷰 #3] 자메이크는 왜? '번역가가 번역 자막 잘 만드는 기술'에 집중할까?

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnail219a908f-b813-4171-bc1b-fc448116adf9)

### 유튜버에게 찾아오는 유혹의 손길

유튜브를 시작한 당신이라면 분명 **그분**의 메세지를 받아본 적이 있을 겁니다. 

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnaildbfcd201-4b66-457b-933f-ca86e15cd26a" style="width:50%; !important; height: 50%;"></center>


**“유튜브 구독자 구매해보지 않겠어요?”**
인스타그램이나 페이스북 등을 통해 은밀하게 내미는 손길을 자메이크 SNS 계정을 통해서 저희도 종종 받아보는데요, 저 사람들의 말처럼 유튜브 구독자 구매하면 나도 저 유튜버처럼 성공할 수 있을까요? 남들이 3~4년 걸리던 길을 단숨에 올라갈 수 있을까요? **물론 비용을 지불한 만큼 유튜브 구독자 구매 효과는 일어날 거예요. 몇 주 동안은요.**

혹시 유튜브 구독자 구매를 알아보기 위해 이 글을 찾아온 사람이 있다면, **설령 부모의 원수라도 저는 한번은 뜯어말릴 것 같습니다.** 왜 그런지 이유를 들려줄게요.

* * *
### 엄마가 하지 말라는 데에는 다 이유가 있다
#### 🚨 **유튜브 구독자 구매가 독인 이유, 첫번째 : 알고리즘 파괴**
많은 선배 유튜버들이 구독자 구매를 말리는 첫번째 이유, 그것은 바로 유튜브 알고리즘에 심각한 영향을 미치기 때문입니다. 유튜브에서는 구독자 수만큼이나 중요하게 봐야 하는 것이 **시청 지속률**입니다. 단기간 안에 구독자 수를 올려야 하는 만큼 콘텐츠의 시청 지속률까지 신경 쓰지 못하고 조회수만 채워 넣기 위해 초반 2~3초만 시청하는 경우가 보통인데요, 이럴 경우 시청 지속률이 현저하게 낮아지기 때문에 유튜브 알고리즘에서는 콘텐츠의 퀄리티가 나쁜것으로 간주하여 채널 노출이 제한될 수 있어요.

#### 🚨 **구독자 구매가 독인 이유, 두번째 : 결국 금방 표가 난다**
유튜브 구독자 구매는 원하는 구독자 수를 채우게 되면 그걸로 끝인데요. **그 말은 n천명의 구독자 인형을 채워 넣은 것과 마찬가지라는 뜻이에요.** 구독자가 늘어난 만큼 콘텐츠를 함께 보며 즐기고 노는 반응이 있어야 하는데 **채널 규모에 비해 콘텐츠 활동 비중(조회수, 좋아요/댓글 등)이 현저히 적은 채널은 죽은 채널로 간주되어 유튜브에서 노출이 제한**될 수도 있어요.

#### 🚨 **구독자 구매가 독인 이유, 세번째 : 구매는 구매를 부르고…**
그럼에도 불구하고 구독자 3,000명을 구매해서 1만 구독자 달성에 성공한 당신, 축하드립니다! 다음에는 2만 구독자가 목표인가요? **요즘은 유튜브 구독자 구매 시스템이 상당히 정교해져서 좋아요나 시청자 수, 커스텀한 댓글까지 구매가 가능하다고 하더라구요**. 부족한 콘텐츠 반응 수도 한번 채워 넣어볼까요? 그리고 다음에는 4만, 5만 구독자로 거듭나기 위해 더욱 노력(?) 하겠죠?

실제로 새로운 브랜드나 아이돌 그룹, 콘텐츠 론칭을 위해 유튜브 구독자 구매로 단기간에 성장한 일부 채널들은 채널 수치가 하락하지 않기 위해 끊임없이 구독자 수나 시청자 수, 좋아요 등의 반응을 구매해서 채워 넣는다고 해요.

#### 🤔 **그럼 구독계(맞구독)은 괜찮을까?**
그럼 다른 방법은 없을까요? 유튜브 커뮤니티나 카페 등을 찾아보면 심심찮게 맞구독에 대한 요청 글이 올라오는데요. 서로서로 구독하고, 구독해 주면서 도와주면 누이 좋고 매부 좋은 일 아닐까요? 그렇지 않습니다. 
**[유튜브 커뮤니티 가이드](https://support.google.com/youtube/answer/3399767?hl=ko&ref_topic=9282365)에서는 유튜브 맞구독을 금지하고 있어요.**
![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnail4bf0de93-056a-44b1-9d46-42094386fde0)
유튜브에서는 허위 참여 관련 정책으로 **의도적으로 구독자나 조회수를 늘리는 늘리는 행위를 강하게 제재**하고 있는데요, 유튜브의 핵심인 YPP(유튜브 파트너 프로그램)에도 영향을 줄 수 있기 때문에 이를 위반할 시 채널 삭제도 당할 수 있으니 조심하세요!

#### **유튜브 구독자 구매가 악영향만 끼칠까?**

사실 유튜브 채널을 원하는 만큼 성장시키는 데에는 상당히 오랜 시간이 걸리고, 또 시간과 노력을 쏟는 것에 비례해서 성공하는 것도 아니기 때문에 유튜브 구독자 구매를 더 고민하는 사람들이 많을 거예요. 이렇게까지 이야기를 했어도 아직도 구독자를 구매하기 위해 고민 중이라면, 이런 경우에 활용해 본다면 좋은 방법일 수도 있을 것 같습니다.

✔️ 위에서 언급한 것처럼 **끊임없이 채널 운영에 예산을 쏟을 여력과 계획이 있다면** 구독자 구매를 고려해 봐도 좋을 것 같아요.
✔️ 마케팅 프로모션이나 게릴라성 이벤트 등 **단기간 안에 바이럴 성과를 만들어야 하는 경우**, 유튜브 구독자 구매가 도움이 될 수도 있을 것 같아요.
✔️ 유튜버의 생활을 청산하기 전, **마지막 불꽃을 태우고 싶은 사람이라면** 한번 도전해 봐도 좋을 것 같아요!

* * *

### 그럼 확실한 구독자를 늘리는 확실한 방법은?
그럼 구독자를 건강하고 확실하게 올릴 수 있는 방법은 없을까요? 유튜버로써 성공하는 데 왕도(王道)는 없지만, 채널을 성장시키는 데 도움을 줄 수 있는 왕도는 있어요. **지금부터 가장 중요한 것을 알려줄게요!**

#### ✅ **일관적인 주제의 콘텐츠 운영**
인생을 살아가면서 가장 중요한 덕목 중 하나가 뚝심이죠? 내가 정한 길을 묵묵하게 가는 것, 이건 유튜브 채널을 운영하면서도 똑같은 것 같아요. 일관적인 주제를 다루는 콘텐츠를 통해 관심사가 같은 시청자들이 꾸준히, 더 많이 볼 수 있도록 **길을 만드는 게 중요합니다.** 만약 인테리어가 주제라면 방 꾸미기 브이로그, 인테리어 브랜드 정보, DIY 라이브, 랜선 방구경 같은 콘텐츠로 다양하게 보여줄 수 있겠죠? 

#### ✅ **콘텐츠 연관 키워드 활용** 
콘텐츠와 연관된 키워드를 활용하는 것도 정말 중요합니다. 연관 키워드를 노출시켜서 관심사가 같은 사람들이 내 콘텐츠를 볼 수 있도록 유도하는 것인데요. 내 콘텐츠에 연관된 키워드를 찾는 게 어렵나요? **[구글 트렌드🔗](https://trends.google.com/trends/?geo=KR)** 사이트를 참고해 보세요! 내 관심사와 연관된 키워드부터 실시간 트렌드까지 많은 것들을 볼 수 있습니다.
![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnailfc44ff8a-1735-4da3-a910-06cfb55fbcf0)

#### ✅ **메타데이터의 중요성** 
유튜브는 영상만 만든다고 끝이 아니죠? 썸네일이나 제목, 설명, 해시태그 등 신경 써야 할 것이 너무도 많은데 **신경 써야 할 이유가 있어요.** **유튜브 알고리즘은 영상에 포함된 썸네일, 제목, 해시태그 등으로 영상을 인지하여 이 콘텐츠가 사람들에게 더 많이 보여줘도 괜찮은 콘텐츠인지 판단**하기 때문이에요. 이 메타데이터를 얼마나 잘 활용하느냐에 따라 내 채널이 성장하는 속도가 좌우된다고 해도 과언이 아닙니다.

**특히 메타데이터 형성에 가장 큰 도움을 주는 요소는 자막**인데요, CC 자막의 유무에 따라 해외 시청자에게까지 보여줄 수 있는 콘텐츠인지 아닌지 판단되기 때문에 조회수 증대에 큰 영향을 줄 수 있습니다. 

CC 자막을 활용할 때 유의점! 번역 자막은 분명 해외 조회수 증대에 도움이 되지만 **번역 퀄리티가 낮은 자막은 초반 시청률 이탈에 영향을 주기 때문에(콘텐츠도 무슨 말인지 알아들어야 보겠죠?) 오히려 시청 지속률이 낮아져 채널에 안 좋은 영향을 미칠 수가 있습니다.**
* * *

### 결론은 CC 번역 자막>>>>>>유튜브 구독자 구매 입니다.

**유튜브 구독자 구매를 고민하다가 이 글을 진지하게 읽고 내려온 당신, 구독자 구매 대신 번역 자막을 달아보는 건 어떨까요?** 
자메이크는 콘텐츠 전문 번역가가 번역하는 자막을 하루 만에 달 수 있어요. 신동엽, 강형욱, 지무비 등 수많은 크리에이터들이 믿고 쓰는 번역 자막, 자메이크가 처음이라면 첫 자막은 반값에 달아보세요!

> **✍🏼 오늘의 콘텐츠 다섯줄 요약**
> ✅ 유튜브 구독자 구매는 채널 알고리즘에 치명적인 영향을 준다. 맞구독도 마찬가지.
> ✅ 유튜브 구독자 구매를 굳이 한다면 짧고 굵게, 잠깐 필요한 경우에만 하자.
> ✅ 유튜브를 성장시키는 데 진짜 도움을 주는 것은 : 
> 일관된 콘텐츠 주제, 콘텐츠 연관 키워드, 잘 형성된 메타데이터(썸네일/제목/해시태그/자막) 
> ✅ 특히 좋은 퀄리티의 번역 자막은 메타데이터 형성, 해외 시청자 조회수/시청 지속률에 큰 도움을 준다.
> ✅ 유튜브 구독자 구매보다 좋은 번역 자막을 구매하는 것이 더 낫다.
 
 

* * *
 
잠깐! 자메이크가 처음인가요? 첫 자막은 반값에 달아보세요! 신규 가입자 쿠폰팩 증정! <a href="https://jamake.io/ko/signUp?utm_source=insight&utm_medium=insight&utm_campaign=insight_to_signup">
<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail164e355b-a3c7-49a1-821f-79f2a595f8bf" style="width:100%; !important; height: 100%;" alt="Clickable Image"></center>

엄마가.. 아니 알고리즘이 하지 말라는 데에는 다 이유가 있다

유튜브 구독자 구매의 단점, 하나하나 알려드릴게요!

유튜브 구독자 구매가 알고리즘에 미치는 악영향

유튜브 구독자 구매 = 유튜버의 마지막 불꽃인 이유

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnail315a413a-344e-4bdd-b80a-1ddb91c9c703)

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnailf7f914a4-cdef-48eb-89cd-10c8b3a4ca99)
최근 몇몇 커뮤니티에서 “미쳐버린 요즘 실시간 더빙 성능”이라는 글이 화제가 되었습니다.
영어로 말하는 영상을 8개 언어로 번역하여 더빙한 것인데요, 놀라운 점은 실제 발화자의 목소리와 거의 비슷하게 더빙하며 심지어 입술 모양까지 해당 언어에 맞게 합성한 것이죠. 영상 먼저 보시죠. (아래 영상을 클릭하면 재생됩니다.)

```video
{"url":"https://jamake-asset-prod.s3.amazonaws.com/video_asset/cd11f32e-626a-4f4b-b9dd-51214875b4a0"}
```

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail212c1f65-fae3-4952-bc39-9de214e27675" style="width:100%; !important; height: 100%;"></center>
<center>출처 : https://x.com/LinusEkenstam/status/1706432154756846067?s=20</center>

 
직접 해당 영상을 올린 트위터를 확인해 보았습니다. 해당 유저에 따르면 즉석에서 통역 더빙과 립싱크까지 구사한다고 설명해 놓았음을 알 수 있었습니다.그런데 저희 자메이크는 의문을 감출 수 없었습니다.

***“AI로 영상을 번역하고 + AI로 목소리를 학습하여 + AI로 더빙하고 + AI로 입술 모양까지 합성한다? 게다가 이 모든 게 실시간이라고?”***

요즘 가장 잘나가는 기술인 AI 번역, 더빙, 딥페이크 3종 세트의 실시간 처리라니!?
과연 이 영상이 진짜인지, 진짜라면 어떤 기술인지, 실제 활용할 수 있는 수준인지 궁금해진 저희 자메이크는 이 기술에 대해서 좀 더 자세히 알아보기로 했습니다.

* * *

### 누가 만든 생성형 AI인가?
### 
![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnaile306f96c-b61b-4353-a741-55e57478df3e)
우리는 우선 해당 트위터 유저가 언급한 HeyGen이라는 회사에 대해서 알아보았습니다.
HeyGen은 요즘 많이 보이고 있는 생성형 AI 기반의 스타트업 중 하나입니다. 특히 비디오 제작에 생성형 AI를 도입하여 자신의 아바타를 통해 촬영 없이 비디오를 생성할 수 있도록 하는 툴을 다양하게 개발하고 있습니다.
실제 서비스하고 있는 주요 툴로는 가상의 아바타를 생성하여 미리 제공되는 여러 가지 템플릿에 대본을 넣어 비디오를 생성하는 형태의 서비스였습니다.

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnailb9d520d5-d032-4d8f-b66e-3754e0a14288)
앞서 말한 기술은 Labs라는 실험실 페이지에서 확인할 수 있었는데요, 정확한 툴 이름은 Video translate 기능이었습니다. 설명에 나와있듯이 한 번의 클릭으로 영상의 번역 더빙을 발화자의 자연스러운 음성 변환과 입술 모양으로 합성해 준다는 것이었는데요, 실제로 500mb 이하의 영상파일을 업로드하면 바로 번역 더빙 작업을 시작할 수 있는 형태의 툴이었습니다.

따라서 앞서 커뮤니티에서 화제가 되었던 실시간 더빙은 약간 와전된 것이라고 볼 수 있습니다. 트위터에서 말하는 Instant dubbing + lip sync는 실시간 더빙이라기보다는 원클릭으로 즉시 번역 더빙부터 립싱크까지 한 번에 할 수 있다는 뜻으로 사용된 것이지요. 이 기술을 시연한 영상들은 유튜브에 상당히 많이 올라와 있었습니다. 우리는 이 영상들을 좀 더 자세히 살펴보면서 몇 가지 장단점을 파악할 수 있었습니다.

* * *

### Heygen Video Translate의 장점
![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnail04040aa3-8732-4563-a1e0-544d2f5798f3)
**인건비와 시간 절약**
확실히 번역과 더빙, 딥페이크 합성까지 한 번에 처리하는 것은 기존에 없었던 새로운 시도임에는 분명합니다. 각 단계별로 들어가는 인건비와 소요시간만 보아도 상당한 효율성을 보이는 것을 알 수 있죠. 5분짜리 영상을 처리한다고 가정했을 때 대략 3200원 정도가 소요되었습니다. 놀라운 가성비죠.

물론 현재는 동시통역 송출의 단계는 아니고 이미 촬영된 영상을 처리하는 것이지만 추후 기술의 발전을 고려할 때 수준 높은 실시간 더빙이 가능하다면 게임 체인저로서의 역할도 가능할 것으로 생각됩니다.일례로 전 세계에서 가장 구독자가 많은 미스터 비스트의 경우 유튜브에서 새롭게 오픈 준비 중인 더빙 기능을 테스트하기 위해 각국의 언어로 더빙본을 만들어 게시한 적이 있습니다. 한국어 더빙 영상도 확인할 수 있었는데 이때 참여한 성우분들의 브이로그가 올라오기도 했었죠. 상당히 유명한 분들을 섭외하여 더빙을 진행하였는데 아마 더빙 작업에 배정된 예산 또한 상당했을 거라고 추측됩니다.

이러한 작업들을 AI를 통해 심지어 립싱크까지 가능하다면 굉장한 예산 절감의 효과가 있을 것이라는 것은 다들 상상할 수 있을 것입니다. (물론 이 기술이 사람이 하는 수준까지 완벽히 소화한다는 전제하에요.)

* * *

### 치명적인 단점
하지만 상당한 원가절감의 이점에도 불구하고 저희가 확인한 단점은 앞서 살펴본 장점을 모두 상쇄하고 남을 만큼 치명적이었습니다. 

**첫째, 인풋부터가 완벽하지 않다.**

이 기술은 AI 전사 작업 - AI 번역 - AI 더빙 - AI 딥페이크까지 총 네 가지 AI 기술이 연쇄적으로 연결되어 있습니다. 하지만 가장 첫 번째 기술인 AI 전사 작업부터 완벽하지 않은 모습을 볼 수 있었습니다. 구체적인 사례를 제시하긴 어렵지만 (고소가 두렵습니다) 유튜브에 이 기술을 테스트한 여러 영상을 볼 때 전사 작업이 잘되지 않아 최종 아웃풋에서 엉뚱한 말을 하는 경우를 어렵지 않게 볼 수 있었습니다. 이처럼 AI 기술 특성상 최초 인풋이 완벽하지 않으면 아웃풋은 산으로 가는 경우가 아직까지는 더 큰 비율을 차지하고 있는 것을 볼 때 이를 해결하는 것이 관건이 아닐까 싶습니다.

**두 번째, 아웃풋 영상의 화질 저하**

딥페이크 기술 특성상 화질 저하는 일어날 수밖에 없습니다. 이를 최소화하려면 고사양의 환경 속에서 많은 시간이 필요한데 그렇게 되면 가격은 상당히 높아질 것이 분명합니다. 가격을 낮춰 고객의 구매 허들을 낮추는 대신 영상 아웃풋의 퀄리티에서 타협한 것이 다소 보였습니다.

**그리고 가장 치명적인 단점 세 번째, 제약사항이 많다는 것입니다.**

아래는 이 기능을 실행하기 전 요구되는 몇 가지 사항들입니다.

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnailb8fe736c-bb34-4635-aaf8-4bcea8770140)
역시 기술적 오류를 줄이기 위해 영상의 형태에 여러 가지 제약 사항이 있었습니다.

우선 발화자의 목소리를 제외한 배경음이 없어야 하고, 영상에 등장하는 인물도 1명이어야 했습니다. 게다가 5분 이내의 영상만 작업이 가능했죠. 이런 조건들을 만족시키는 영상이 과연 얼마나 있을까요? 아마 5분 이내의 간단한 인터뷰 영상이나, 제품 소개영상 정도에 국한될 것입니다. 게다가 최종 영상 하나로 바로 작업이 가능한 게 아닌 배경음을 뺀 영상을 올려야 하기 때문에 후작업은 불가피해 보입니다. 과연 이렇게 불완전한 기술에 월 24달러 (한화 약 32,000원)을 바로 지불하고 실무 투입이 가능할까요? 벌써 이것저것 테스트하다가 잘 안돼서 휴먼 서비스를 찾고 있는 여러분의 모습이 상상되지 않습니까?

그리고 정말 치명적인 것은 따로 있습니다. 바로 한국어를 출발어로 지정할 수 없다는 것입니다. 여기서 모든 게 막혀버립니다. 우리 콘텐츠를 저렴하게 글로벌화시키려는 시도조차 할 수 없으니까요. 그동안 이 서비스가 실무에 얼마나 도움이 될지 공부하던 저희는 당황스러웠습니다. 애초에 한국인에게는 사용 불가한 서비스였으니까요. 그만 알아봅시다.

* * *

### 종합적인 결론

“미쳐버린 요즘 실시간 더빙 성능”에 관해 저희가 내린 결론은 이렇습니다.

우선 실시간 기술처럼 커뮤니티에 소개되었지만 사실 실시간은 아니었으며, 번역+더빙+딥페이크까지 잘 구사한 기술인 것은 맞으나 한계점이 확실히 있고, 돈을 지불하여 실제 이를 실무에 사용하는 것에는 아직까지는 리스크가 있다고 정리할 수 있겠습니다.

무엇보다 아직은 한국어 to 영어가 불가하여 국내 콘텐츠의 글로벌화는 불가하다는 점에서 메리트가 없다고 할 수 있겠습니다. 따라서 이번 토픽은 신기한 기술을 서비스하는 회사가 있다 정도로만 보시면 될 것 같네요. 

그렇다면 한국어 콘텐츠를 글로벌화하기 위한 가장 저렴하고 좋은 방법은 없을까요?
당연히 있습니다! 심지어 국내에 안정적으로 서비스하고 있지요. 바로 저희 자메이크 입니다 😄

아직 자메이크가 뭔지 모르신다면 아래 링크를 통해 확인해 보세요!
 
 

```link
{"name": "자메이크 알아보기", "url": "https://jamake.io/ko/singlePayment", "type": "primary", "dataLog":"btn_post_editor_link_d43ccbf3", "size":"large"}
```

 
 

* * *
 
잠깐! 자메이크가 처음인가요? 첫 자막은 반값에 달아보세요! 신규 가입자 쿠폰팩 증정! <a href="https://jamake.io/ko/signUp?utm_source=insight&utm_medium=insight&utm_campaign=insight_to_signup">
<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail164e355b-a3c7-49a1-821f-79f2a595f8bf" style="width:100%; !important; height: 100%;" alt="Clickable Image"></center>

현재 실시간 더빙이라고 난리난 서비스에 대해 알아보자!

생성형 ai를 이용한 실시간 더빙, 번역, 그리고 립싱크(딥페이크) 기술이 접목된 신기술이 화제입니다. 이 기술에 대해 자세히 알아보고 실제 상업 실무에 활용 가능한 수준인지 직접 확인해 분석해 보았습니다. 결론적으로 실시간의 기술은 아니었지만 주목할만한 기술이라고 할 수 있습니다.