[***지난 시간에는 요즘 핫한 AI인 위스퍼에 대해서 알아보고,***](https://jamake.io/ko/insight/121) 이게 어떻게 활용되는지, 그리고 또 여러분처럼 콘텐츠 제작자나 자막 번역이 필요한 분들에게 어떻게 활용될지 장점을 알아보았습니다. 이번 시간에는 그럼에도 불구하고 왜 위스퍼가 아직까지 실무에 도움이 될 수준은 아닌지 하나하나 알아보도록 하겠습니다.
 
***
### **위스퍼, 아직 설레발인 이유. 단점 1 : 고성능 환경 요구 (무료 같지만 무료가 아니다)**

인생은 장비 빨이라는 말이 있듯이, 역시 위스퍼 또한 좋은 음성 인식률을 위해서는 고성능의 PC 환경을 요구합니다. 정확하게는 그래픽 카드의 성능이 좋아야 하는데요, 아래 표를 보시면 대충 감이 오실 겁니다.

<img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail8130875a-fd3f-4bb0-b376-b5f5bff20ecf" style="width:100%; !important; height: 100%;">
<center>위스퍼의 모델별 요구되는 VRAM 용량. large 모델로 갈 수록 에러율이 낮아지는 고성능 모델이다. (출처 : https://openai.com/research/whisper)</center>

 
표에서도 볼 수 있듯이, 가장 인식률이 좋은 large 모델을 사용하려면 최소한 10GB의 VRAM이 필요합니다. 최소 3000번대 이상의 그래픽 카드가 필요한 것인데요, 보통 많이들 사용하시는 3080ti의 경우 300만 원을 웃도는 가격입니다.


<img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnaila6d65558-b7a3-4e81-b445-44e5487ea165" style="width:100%; !important; height: 100%;">
<center>위스퍼를 돌리려면 필요한 그래픽카드의 가격 (출처 : 다나와 최저가 검색 결과)</center>

 
결국 위스퍼를 활용해 콘텐츠에 번역 자막을 달기 위해서는 고성능 환경을 위한 지출이 불가피하다는 결론입니다. 글쎄요, 집에서 고사양 게임을 같이 돌리시는 분들은 백번 양보해 고려할 수도 있는 옵션이지만 회사에서 해당 환경을 갖추고 번역 작업에 투자하기란 현실적으로 어려운 부분이 많을 것 같네요.
 
***
### **위스퍼, 아직 설레발인 이유. 단점 2 : 설치와 운용이 어렵다**

위스퍼를 콘텐츠 번역 작업에 활용하기 어려운 이유에는 가격의 문제 말고도 큰 문제가 하나 더 있습니다.
바로 설치가 어렵다는 것과 사용하기 어렵다는 것이죠.

우선 위스퍼를 사용하기 위해서는 세 가지 방법이 있습니다.

> 1️⃣ PC에 직접 설치하여 사용
> 2️⃣ 구글 코랩(Colab)을 이용하여 클라우드 상에서 구동
> 3️⃣ 무설치 (웹상에서 이용)

세 가지 방법 모두 각각의 제약이나 단점이 있습니다.

우선 첫 번째, PC에 직접 설치하여 사용하는 경우 바로 위 문단에서 설명한 것과 같이 그래픽 카드를 활용한 PC 구동을 말하는데요, 우선 개발 지식이 어느 정도 필요합니다.

<img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnaila0ae657f-466f-4497-bf48-ed356009f7ef" style="width:100%; !important; height: 100%;">
<center>프롬프트가 뭔지 모르신다면 PC설치는 시도하지 않는것을 추천합니다.</center>

 
Python 을 설치해야 하고, PyTorch 도 설치해야 합니다. 그 다음 FFmpeg도 설치해야 하고 그다음에 위스퍼를 설치해야 하는데 이후 OpenAI의 위스퍼 API도 연결해야 하고 여러 가지 값들을 세팅해야 하고… 음.. 그만 알아봐도 될 것 같습니다.

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail7c368565-5186-43db-90cc-b677ce474dee" style="width:30%; !important; height: 30%;"></center>
<center>더 이상의 자세한 설명은 생략해도 좋을 것 같습니다</center>

 
두 번째, 구글 코랩(Colab)을 이용하여 설치. 이건 앞서 말한 PC 설치보다는 난이도가 쉽습니다. 다만 클라우드에 올려서 구동하는 프로그램 특성상 다소 느린 부분이 있으며, 서버가 불안정할 경우 자주 튕기는 문제가 있습니다. 특히나 긴 영상을 작업할 때는 중간중간 튕기면 다시 해야 하기 때문에 여러분의 정신건강에 상당히 악영향을 미칠 수 있겠죠.

마지막으로 무설치가 제일 간단한데요, 웹상에서 위스퍼를 이용하여 STT 서비스를 무료로 제공해 주는 사이트가 있습니다. 하지만 이 방법의 치명적인 단점은 매우 느리다는 점과 30분 이상의 영상은 작업이 불가하다는 점입니다.
 
***
### **위스퍼, 아직 설레발인 이유. 단점 3 : 그래도 아직 사람이 손봐야 한다**

만약 여러분이 위스퍼로 콘텐츠 번역을 진행했다고 가정해 봅시다.

자, 회사에서 콘텐츠 10편의 번역 작업을 여러분에게 맡겼습니다.
시간도 부족하고 전문 번역 외주를 맡기기에는 비용적인 부담도 있던 여러분은 요즘 핫하다는 위스퍼로 자막을 생성해 보았습니다. 테스트해보니 꽤나 정확한 음성 인식률을 보이네요. 콘텐츠 기획에 너무 바쁜 여러분은 위스퍼를 믿고 검수 없이 번역 의뢰까지 진행합니다. 그렇게 번역된 자막을 달아 콘텐츠를 배포하고 몇 시간 뒤. 자막이 엉터리라는 댓글이 수도 없이 달리게 됩니다. 그리고 여러분의 카톡에 뜨는 부장님의 장문의 메시지..

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail66d581f7-4aef-4fc7-84a6-c66c8673175e" style="width:70%; !important; height: 70%;"></center>
<center>부장님의 의견에 따르면 위스퍼는 소를 잡는 칼 입니다.</center>

 
이처럼 에러율은 위스퍼가 여러분의 실무에 도움 안 된다는 것을 보여주는 치명적인 결격 사유입니다. 결국 또 사람이 검수해야 한다는 것이지요. 위스퍼가 아무리 현존하는 STT 중 최고의 성능을 지녔다고 해도 완벽히 음성을 인식하지는 못합니다. 반면 여러분의 콘텐츠는 상업적인 영상 또는 유튜브에 올라가는 콘텐츠일 텐데 무엇보다 정확한 워딩을 전달하는 게 기본이 되어야 합니다. 따라서 취미로 자막을 만드는 게 아닌 이상 여러분은 이 위스퍼가 내놓은 결과물을 검수하는데 리소스가 필요할 것은 분명해 보입니다.
 
***
### **결론 : 그럼 위스퍼 말고 뭘 써야 하는데?!**

위에서 살펴본 바에 따르면 결국 위스퍼는 아직까지는 빛 좋은 개살구라는 것을 알 수 있습니다. 서론에서 언급했던 각종 커뮤니티에서 유저들이 특정한 영상을 취미로 번역하는 것이라면 훌륭한 툴일수는 있습니다만, 이 글을 읽고 있는 여러분처럼 본인의 유튜브 콘텐츠나 회사의 홍보영상, 방송 콘텐츠, 강의 콘텐츠 등의 전사 작업에 위스퍼를 사용하기에는 리스크가 상당하다는 것이죠.

그렇다면 위스퍼보다 더 나은 대안은 없는 것일까요?

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail889f5b7e-0b52-40c6-bd8f-d7f9ca70c0e3" style="width: 60%; !important; height: 60%;"></center>

 
영상을 통으로 넘기면 알아서 전사 작업을 해주고 검수까지 해서 오탈자를 체크하고, 타임코드를 생성하여 한글 자막 파일과 함께 원하는 언어의 자막까지 자동으로 제공해 주는데, 최대한 빠르게 작업되어야 하고 심지어 비용은 적게 들이는 좋은 방법은 정말 없는 걸까요?
 
***
### **자메이크가 정답이다**


<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnailb4a663ad-9042-4361-a659-951ee6f83919" style="width:100%; !important; height: 100%;"></center>

 
축하드립니다.
여러분은 위에서 언급한 모든 것을 해결할 수 있는 최고의 번역 자막 플랫폼 자메이크에 접속해 계십니다.
바로 여기, 저희 자메이크에서 여러분은 콘텐츠 번역 자막에 관한 A to Z를 해결할 수 있습니다.
여러분이 할 일은 딱 하나입니다. 영상을 올리고 주문 버튼만 누르면 되죠! (심지어 영상 링크만 있어도 됩니다)
자메이크에서는 영상을 의뢰받는 즉시 AI를 활용한 전사 작업에 들어갑니다. 당연히 전문 검수자가 생성된 한글자막을 검수하여 교정하는 것도 포함이죠!

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail42798f0c-71c6-48a0-8a6f-bd81c1cefa38" style="width:80%; !important; height: 80%;"></center>
<center>자메이크의 영상 전사 작업 모습.</center>
<center>타임코드와 함께 스크립트를 생성하며 검수까지 빠르게 이루어 집니다.</center>

 
그리고 이건 처음 공개하는 사실인데, 자메이크에서는 이미 예전부터 위스퍼 엔진을 활용하여 전사 작업 기술을 높은 수준으로 개발 해왔습니다. (저희 개발자분들 능력자 인정)

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnailcad4c2c2-3f6e-442d-9251-ab4b2f192ece" style="width:70%; !important; height: 70%;"></center>

 
게다가 자메이크는 업계에서 최초로 당일 번역을 제공하고 있습니다. 오전 11시 이전에 주문하면 오늘 번역 자막이 달리게 되죠. 위스퍼로 전사 작업을 직접 한 후 자막 파일을 가지고 번역가를 구인해서 번역 의뢰하는 것보다 훨씬 시간을 아낄 수 있겠죠?

그렇다면 가장 중요한 비용은 얼마나 들까요?

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnailf07f3305-9c1d-4b19-a1f4-d6d444f1dcbf" style="width:70%; !important; height: 70%;"></center>

 
무려 분당 3,900원으로 업계 평균 대비 70%나 저렴합니다. (\*구독 서비스 이용 시)
보통 한글 스크립트를 들고 번역가를 직접 구해서 외주를 진행했을 때 평균 분당 5,000원의 가격이 형성되어 있는 것을 볼 때 아주 합리적인 가격이죠.

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnailaffa065b-3982-4e48-90f2-e97e49c6e7df" style="width:60%; !important; height: 60%;"></center>
<center>OO외주 플랫폼에서 “번역 자막”을 검색한 결과.</center>
<center>대부분 분당 5,000원의 가격이 형성되어 있음을 알 수 있다</center>

 
10분짜리 영상을 기준으로 했을 때 일반적으로 총 50,000원의 비용이 발생하는 반면, 자메이크에 의뢰할 경우 39,000원으로 약 11,000원의 차이가 발생합니다. 매달 영상을 5개만 올려도 55,000원의 차이가 나며 1년간 꾸준히 콘텐츠에 번역 자막을 달 경우 총 660,000원의 큰 차이가 나게 되는 셈이죠.
 
***
### **위스퍼 VS 자메이크**

앞서 살펴보았듯이, 전사 작업부터 검수, 번역, 그리고 자막 적용까지 위스퍼보다 자메이크가 훨씬 편리하고 빠르며, 가성비 좋다는 것을 알 수 있습니다. 아래는 그 차이를 한눈에 보기 좋게 정리한 표입니다.

 
<img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnaildf2ec7f6-dc6b-45b6-96ff-fee3449b9918" style="width:90%; !important; height: 90%;">

 
결국 여러분이 위스퍼를 사용하여 전사 작업을 무료로(하지만 리소스를 꽤나 투입하여) 진행하고, 번역 외주를 구하여 자막 작업을 저렴하게 진행하려는 계획은 자메이크를 이용하면 오히려 저렴하게 이용할 수 있다는 결론이 나옵니다.
 
***
### **정리하며**

요즘 커뮤니티 사이에서 핫한 위스퍼, 확실히 그동안 보여주었던 음성 인식 기술 중에 단연 최고의 성능을 보여주고 있는 것은 맞습니다. 하지만 이 글을 보고 계시는 크리에이터, 또는 기업, 방송사, 대형 제작사 여러분들의 경우는 콘텐츠 번역 자막 작업에 단순히 전사 작업만 해야 하는 것이 아니죠.

정확한 전사 작업을 위해 검수도 해야 하고, 타임라인 코드가 맞는지도 확인해야 하고, 해당 파일을 번역가에게 보내서 번역 작업을 의뢰하거나 직접 무료 번역기를 돌려서 시간을 투자해야 하고, 결과물을 검수하여 틀린 부분을 고치는데 또 시간을 많이 써야 하며 이렇게 나온 최종 자막을 콘텐츠에 다시 업로드해야 하죠.

이 과정에서 드는 시간과 비용을 생각한다면 자메이크를 이용하는 게 훨씬 경제적이고 합리적인 방법이라는 게 확실히 공감이 되지 않나요?

만약 아직 자메이크의 서비스가 구체적으로 어떤 식으로 진행되는지, 또는 세부적인 옵션에 따른 가격이 궁금하시다면 아래 링크를 통해 직접 영상 파일을 올려보고, 견적 측정을 해보세요!

견적을 내보는 것은 몇번을 해도 무료입니다!

 
```link
{"name": "영상 링크만으로 가격 바로 알아보기", "url": "https://jamake.io/ko/dashBoard/newProject", "type": "primary", "dataLog":"btn_post_editor_link_6563f524", "size":"medium"}
```
 

 
 

* * *
 
잠깐! 자메이크가 처음인가요? 첫 자막은 반값에 달아보세요! 신규 가입자 쿠폰팩 증정! <a href="https://jamake.io/ko/signUp?utm_source=insight&utm_medium=insight&utm_campaign=insight_to_signup">
<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail18c49a5f-485a-44ba-bc71-d70ab07b6dc3" style="width:100%; !important; height: 100%;" alt="Clickable Image"></center>

실무에 위스퍼를 사용하면 안되는 EU

위스퍼(Whisper) AI로 자동 번역 자막 만들기, 쓸만할까? (2)

![image](https://jamake-asset-prod.s3.amazonaws.com/thumbnaile747ff84-1e06-404a-b3f1-8df03d6b97cb)
### 유튜브 MAU 1위 탈환 눈앞에, 근데 MAU가 뭐야?

**유튜브가 머지않아 국민 메신저 카톡의 1위 자리를 탈환할지도 모른대요!**
최근 통계에 따르면 카카오톡의 MAU(월간 활성 이용자 수)*는 4,145만명으로 1위, 그 뒤를 유튜브가 4,095만명으로 바짝 따라잡고 있다고 합니다. 이미 월간 총 사용시간은 유튜브가 15억시간으로 1위를 기록하여 추세대로라면 올 하반기에 카톡의 플랫폼 MAU 부동의 1위 자리를 유튜브가 차지할지도 모른대요. 
![자료참고 : 아이지에이웍스 모바일인덱스](https://jamake-asset-prod.s3.amazonaws.com/thumbnail9be749f3-0abf-44fb-8e7e-0ce1d23781ea)
> *MAU(Monthly Active Users)라고도 불리는 월간 활성 유저는 유저 참여를 조사하는 데 사용되는 KPI이며, 비즈니스는 MAU를 추적하여 전반적인 성장 및 성과를 확인해야 합니다. **높은 활성 사용자 수가 오랫동안 유지된다는 것은 고객 참여가 견고하다는 것을 의미합니다.** 반대로 적은 MAU 수는 비즈니스가 침체되거나 유저가 이탈하고 있다는 증거입니다. applovin 블로그 발췌** 💬
> 

* * *

### 유튜브 MAU 1위의 비결?
이렇게 유튜브가 카톡을 제치고 MAU 1위를 달성할 수 있는 이유는 무엇일까요? 
동영상 플랫폼을 넘어 다양한 분야로 거침없이 뻗어나가는 유튜브의 사업 확장이 큰 몫을 한 것 같아요. 

#### 1. 유튜브가 이제는 사실상 **포털의 커뮤니티 기능***도 대신하고 있고
#### 2. 유튜브 뮤직을 통해 **음원 스트리밍*** 시장에서도 큰 축을 차지하고 있고,
#### 3. 이제는 **라이브 쇼핑 탭***을 신설해서 유튜브에서 바로 쇼핑도 가능하고,
#### 4. 앞으로는 **클라우드 게임*** 사업까지도 진출을 준비하고 있다고 해요!

> *[포털이 밀어낸 이용자 서비스 댓글 이용자들, 유튜브로 몰렸다](https://m.gamevu.co.kr/news/articleView.html?idxno=28312)* 🔗
> *[유튜브 뮤직, 멜론 맹추격… 음악 스트리밍 서비스 점유율 2위](https://m.ekn.kr/view.php?key=20230426010006748)* 🔗
> *[유튜브, 최초로 공식 '라방' 채널 시작](https://www.fpost.co.kr/board/bbs/board.php?bo_table=special&wr_id=1193)* 🔗
> *[한 번 접은 게임 사업, 유튜브에서 다시 시작하는 구글](https://dealsite.co.kr/articles/105854)* 🔗

![유튜브와 카카오 서비스 운영 차이점](https://jamake-asset-prod.s3.amazonaws.com/thumbnail26d07ca8-005e-4c32-8fc0-5281879bd1c9)

카카오도 이미 이 서비스들을 모두 운영하고 있지만 유튜브와 다른 점은 무엇일까요?
카카오는 카카오톡, 멜론, 각종 쇼핑 플랫폼, 게임 등 각 서비스들을 각각의 플랫폼으로 분산해서 운영하고 있지만, 유튜브에서는 이 모든 서비스들을 유튜브라는 하나의 플랫폼에서 모두 이용할 수 있도록 서비스를 모으고 있다는 점이에요. 만약 지금 준비하고 있다는 게임 서비스뿐만 아니라 유튜브에서 카톡과 같은 메신저 서비스를 이용할 수 있다고 한다면 그 파급력은 얼마나 커질까요? 

* * *

### 유튜브 MAU 1위? 그래서 무슨 말이 하고 싶은 건데?
**MAU 1위라는 말은 곧 우리나라에서 가장 많이 이용하는 서비스라는 말과 같아요.**
그럼 유튜브가 카톡을 넘어 가장 많이 쓰는 서비스가 될지도 모르는 소식이 **크리에이터들에게는 왜 중요할까요?**

#### 1. 크리에이터 시장이 더 과열되고 더 빠르게 식을지도 모를 일
누구나 크리에이터로 성공할 수 있는 시대, 하지만 **크리에이터 시장은 이미 레드오션** 이라는 시각의 목소리도 적지 않아요. 1인 미디어 시장규모는 2조 5천억원 정도로 매년 더 커지고 유튜브도 그 흐름에 따라 지금만큼 성장했지만 크리에이터로 시작했다가 접는 사람의 숫자도 점점 더 많아지고 있어요. 남들과 다른 이야기로 꾸준히 콘텐츠를 보여줘야 하는 크리에이터의 노동 강도가 생각보다 높고, 전업 크리에이터의 연 평균 수익이 2000만원 초반으로 기대했던 만큼의 수익이 나질 않아 **전업 크리에이터로써 활동하는 사람들 중 경제적인 어려움을 겪는 비중이 꽤 높다고 해요.***
> *...이 때문에 대부분 전업 창작자들은 생활고에 시달린다. 링크트리 조사에 따르면, 지난해 기준 전업 크리에이터 중 46%가 연간 1000달러(약 128만원) 미만을 번 것으로 조사됐다. 미국 전업 근로자의 평균 급여(2022년 2분기 기준 5만4132달러) 수준인 5만달러(약 6378만원) 이상을 버는 전업 크리에이터는 12%에 불과하다. 조선경제뉴스[수십만 팔로워 유튜버의 현실 수입 알아 보니] 발췌** 💬

#### 2. ‘크리에이터’로써 사회적 지원이 더 늘어날 것
누구나 크리에이터로써 성공할 수 있는 시대, 이건 사회적으로 소외받는 사람들에게 더 큰 기회로 다가올 수 밖에 없어요. 유튜브가 사회적으로도 무시할 수 없는 매체이고, 이제는 ‘크리에이터’라는 직업이 낯설지 않은 만큼 사회적으로 이를 지원해 줄 수 있는 제도가 마련되어야 한다는 목소리도 커지고 있는데요. 이미 경기 콘텐츠 진흥원 외 다수의 관공서에서는 **1인 크리에이터 육성을 위한 지원 프로그램을 운영*** 하고 있고 은행 업계에서는 **유튜브 크리에이터를 위한 대출 지원 상품을 준비***하고 있다고 해요.
>*[경기콘진원, 창작자를 위한 특강 '크리에이터 라이브 콘서트' 개최](http://www.joongboo.com/news/articleView.html?idxno=363598658)* 🔗
>*[청년 유튜버 키운다, 기업은행의 새로운 도전](https://www.kukinews.com/newsView/kuk202305300235)* 🔗

바야흐로 우리는 유튜브의 시대를 살고 있다고 해도 과언이 아닙니다. 그런데 이게 마냥 좋은 것만은 아니라는 사실.. 무슨 이야기일까요? 다음 콘텐츠에서는 유튜브가 커지면 생길 수 있는 문제점, 그리고 크리에이터에게 닥칠 수 있는 문제들을 이야기해볼게요.


* * *
![자메이크 뉴스레터 구독하기](https://jamake-asset-prod.s3.amazonaws.com/thumbnaild9c0c2a4-dea7-423c-91e2-f75d132c9091)

오늘 콘텐츠에서 소개한 뉴스들을 더 빨리 보고 싶다면? 
한달에 한번, 자메이크 뉴스레터를 구독하세요!

```link
{"name": "자메이크 뉴스레터 구독하기📬", "url": "https://page.stibee.com/subscriptions/71676?utm_source=insight&utm_medium=display&utm_campaign=newsletter_stibee", "type": "primary", "dataLog":"btn_post_editor_link_a430b2de", "size":"medium"}
```

유튜브가 부동의 MAU 1위, 카톡을 이길 수 있는 이유?

유튜브 MAU 1위 달성 코앞에, 지금은 유튜브 천하(1)

### **요즘 난리 났다는 위스퍼(Whisper)? 그게 뭔데?!**

**STT(speech to text) 기술을 아시나요?**

말 그대로 음성을 텍스트로 옮겨주는 기술을 뜻하는데요, 해당 기술은 오래전부터 연구되어온 인류의 숙제(?) 같은 것이라고 보시면 됩니다. 이 음성 인식이라는 게 사람마다 말투나 성조, 발성도 제각각이고 주변 환경음이 섞이면 인식률이 처참해지기 때문에 그동안 높은 정확성을 가진 STT는 아직 구현이 어렵다는 것이 학계의 정설이었죠.

하지만 최근 몇 년간 Chat GPT의 공개와 함께 AI 기술에 특이점이 찾아오면서, 딥러닝이 STT 기술에도 큰 영향을 미치게 됩니다. 그래서 나온 것이 바로 OpenAI사의 Whisper(이하 위스퍼)입니다.

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail4fa0d9b2-78b3-461d-86d4-14347c824cdb" style="width: 100%; !important; height: 100%;"></center>

위스퍼는 2022년 9월 OpenAI 사에서 공개한 STT(speech to text) 인공지능 모델입니다. OpenAI에 따르면 위스퍼는 웹에서 수집한 68만 시간 분량의 방대한 자료를 토대로 전 세계 수십 개의 언어와 데이터를 학습했으며, 무수한 음성인식 훈련을 통해 특이한 악센트나 어눌한 말투도 잘 인식하고 시끄러운 소음 속에서의 대화 또한 훌륭하게 구분할 수 있다고 말했습니다.

게다가 OpenAI는 상남자답게 이를 무료로 github에 공개했는데요, 아쉽게도 개발 지식이 어느 정도 있어야 해당 모델을 사용할 수 있다는 허들이 있었습니다.
그러나 최근 국내 개발자분들이 이 위스퍼를 일반인들도 쉽게 사용할 수 있도록 web-ui(웹 브라우저를 통해 프로그램을 조작하는 인터페이스)화 시켜주신 덕분에 커뮤니티에서 엄청난 화제를 일으켰습니다.

**그러자 어떻게 되었을까요?**

예상대로(?) 네티즌들은 우선 성인물 영상들로 위스퍼의 성능을 테스트하기 시작했습니다. 그동안은 성인물 자막에 대한 수요는 많은 반면 공급이 굉장히 제한적이라 알음알음 자막 카페에서 자막 수급을 해왔기 때문이죠. 일부 유저들은 **“게임 체인저가 나타났다”** 고 평가하기도 했고 **“그래도 수작업으로 손봐야 할 것들이 많다”** 고 실망을 드러낸 유저들도 있었습니다.


<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail4d9f27fc-0787-4def-823d-077cad95bb5e" style="width:40%; !important; height: 40%;"></center>
<center>위스퍼로 특정 영상 STT를 시도한 한 유저의 당황한 모습.jpg</center>



위스퍼의 기능을 테스트해 본 네티즌들은 놀라움을 금치 못했는데요, 바로 몇 시간짜리 영상의 언어를 단 몇 분 만에 타임라인이 찍힌 텍스트 파일로 추출할 수 있다는 것이었습니다. 그것도 아주 정확하게요!!
심지어 “음…” “어…” 또는 “그...” 같은 불필요한 단어는 알아서 제외하고 추출하기까지 한다고 합니다. (성능 확실하구먼)

**현재 많은 유저들이 기대하는 위스퍼의 활용법은 이렇습니다.**

> **기대하는 것**
> 👉 특정 영상을 위스퍼에 집어넣는다 → 자막 파일을 쉽게 추출 → AI 번역으로 번역한다 → 한글자막 완성!
> 
> **효과**
> ✅ 와! 기다리지 않고 빠르게 쏟아져 나오는 대량 생산 자막!!
> ✅ 와!! 뜻을 알고 보는 수많은 영상들!!
> ✅ 와!!! 게다가 모든 공정이 무료라고??

그동안 영상 콘텐츠의 번역 자막을 얻으려면 직접 노동을 하거나 돈을 쓰거나, 둘 중 하나를 무조건 해야 했습니다.

>**1\. 직접 영상을 보며 전사 작업\(음성을 텍스트로 옮기는 작업\)을 진행\, 또는 이를 대신해 주는 유료 서비스 이용\.**
**2\. 추출한 텍스트 파일을 직접 번역기 돌리거나\, 번역가에게 유료 서비스 이용**

그런데 이 번거롭거나 돈을 주고 해야 하는 과정을 이제 누구나 무료로 손쉽게 한다?!

즉시 이 소문은 커뮤니티로 널리 퍼지게 되었고, 이는 콘텐츠 제작을 하는 유튜버나 각종 방송사, 프로덕션, 강의 업체 등등 영상 번역 자막을 필요로 하는, 이 글을 읽고 계신 여러분의 귀에까지 들어가게 된 것입니다.

**아마 이런 생각을 하고 계시겠죠.
위스퍼 쓰면 굳이 돈 주고 영상 번역 자막 맡길 필요가 있나?
음성 인식 성능도 미쳤다던데? 전사 작업 한큐에 해결 ㅋㅋ
번역?? 막내한테 AI로 번역 시키면 공짠데?ㅋㅋ**

 
* * *
### **위스퍼에 대해 자세히 알아보자**
자, 서론이 길었죠? 지금부터는 본론입니다. 집중 부탁드립니다🙏
지금부터는 저희 자메이크의 트래픽을 자꾸 뺏어가는 꼴 보기 싫은 위스퍼가 여러분의 콘텐츠 번역 자막 작업에 그다지 큰 도움이 되지 못한다는 사실을 알려드리겠습니다.

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail3d8c3a09-a813-4f6b-b4c5-af35c2fc2974" style="width: 30% !important; height: 30%"></center>
<center>중립기어 박았습니다.gif</center>

아, 물론 대단히 중립적인 스탠스를 유지하고 쓸 테니 걱정하지 말고 편하게 읽어 보시면 됩니다.
우선 위스퍼가 얼마나 대단하길래 난리가 났는지 위스퍼의 장점부터 한번 정리해 보았습니다.
 
***
### **위스퍼 난리 난 이유. 장점 1 : 68만시간 분량의 방대한 학습 시간과 한국어 지원**
<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail5c838e58-77f5-423d-b1e1-00ace1bf1cb2" style="width:100%; !important; height: 100%;"></center>
<center>위스퍼의 언어별 학습시간. 한국어는 무려 8,000시간 학습했다. (출처 : https://openai.com/research/whisper)
</center>

딥러닝 AI의 특성상 어떤 데이터를 얼마나 학습시켰느냐에 따라 성능의 차이가 많이 난다는 것은 대부분 알고 계실 텐데요, 위스퍼의 경우 무려 68만 시간에 이르는 다양한 언어 데이터 셋을 활용하여 학습했다고 합니다. 그중 한국어가 약 8,000시간으로 영어를 제외하고는 7번째로 많은 양의 데이터를 학습했다고 하네요. 그러서인지 한국어의 인식에도 뛰어난 성능을 보여주고 있다는 평가를 받고 있습니다.

 
***
### **위스퍼 난리 난 이유. 장점 2 : 다양한 조건에서도 높은 음성 인식률**
위스퍼는 수많은 음성 데이터 셋을 반복적으로 훈련한 결과, 놀라울 만큼의 정확성을 보여준다고 하는데요, 일상적인 대화 상황부터 속삭이는 소리, 음악, 감정이나 특정한 억양의 대화 등에서도 준수한 성능을 보여주고 있다고 합니다.

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail514117e3-8052-486d-be53-7311be876d38" style="width:70%; !important; height: 70%;"></center>
<center>위스퍼의 WER(Word Error Rate) 수치. 한국어는 14.3%의 오류율을 보이고 있다. (출처 : https://openai.com/research/whisper) </center>

위 표는 위스퍼 깃허브(Github)에서 공개한 각 언어별 에러율 수치입니다. 수치가 낮을수록 에러율이 낮은 것이며 한국어는 약 14.3%의 에러율을 보이고 있습니다. 그럼에도 불구하고 이는 현존하는 기존 STT 프로그램의 성능을 상회하는 수치라고 하니, 사람들이 열광할 수밖에 없는 것이겠죠?
 
***
### **위스퍼 난리 난 이유. 장점 3 : 누구나 지금 당장 쓸 수 있다.**
OpenAI 사는 Chat GPT를 공개하면서 누구나 무료로 쓸 수 있게 (물론 일부 기능, 최신판은 유료이긴 합니다만) 오픈해버렸었는데요, 위스퍼의 경우에도 역시 상남자답게 당당하게 오픈을 해놓았습니다. 다만 해당 모델을 직접 구동하려면 개발 지식이 어느 정도 필요한 상황이었는데, 몇몇 개발자분들의 노력으로 우리 일반인들도 위스퍼 모델을 사용할 수 있게 되었습니다. 그러자 역시 발 빠른 한국인들은 이것저것 테스트해 보면서 위스퍼를 어떻게 설치하고 사용하는지 영상을 올리기도 하고, 사용 후기를 올리기도 하는 등 활발한 위스퍼 검증을 진행하고 있습니다.

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail08fdbcd5-2662-4631-9fc1-4e71b14a38c4" style="width:80%; !important; height: 80%;"></center>
<center>위스퍼를 어떻게 활용하는지 친절하고 자세히 설명해놓은 한 유튜브 채널.jpg (채널명 : 타이탄)</center>

조회 수 보이시나요? (부럽)
유튜브를 찾아보시면 금방 아시겠지만, 위스퍼를 사용하면 정말 빠른 시간 안에 영상의 음성을 텍스트 파일로 추출하는 모습을 볼 수 있습니다. 게다가 몇 기가짜리 영상을 올리는 게 아닌 음성파일만 추출한 mp3 파일을 올리면 훨씬 빠르다는 꿀팁들이 공개되면서, 실제로 몇 시간 짜리 영상에서 음성 타임라인이 찍힌 텍스트를 추출하는 것은 이제 너무나도 쉬운 작업이 되어버렸습니다.

자, 그럼 이 놀라운 STT 성능을 보이는 위스퍼를 사람들은 단순 취미용(?) 영상에만 활용할까요?
아니죠! 이 글을 읽고 계시는 여러분들처럼 자신, 또는 회사의 영상 콘텐츠의 자막을 위스퍼로 해결할 수 있지 않을까? 하는 생각을 당연히 하실 겁니다.
생각대로만 된다면 콘텐츠 제작과 자막 처리 작업 과정에서 큰 산 하나가 그것도 공짜로 해결되는 것이기 때문이죠.
 
***
### **위스퍼, 실무에 쓸 수 있을까?**

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail319b3ce8-997d-43ba-891f-faf1273182fe" style="width:100%; !important; height: 100%;"></center>

기존 콘텐츠 번역 작업은 위와 같은 순서로 이루어졌습니다. 모든 작업에 비용이 발생하거나 또는 직접 해야 하는 리소스 투입이 필요했죠. 하지만 위스퍼를 잘 활용한다면 아래와 같은 모습이 되지 않을까 상상하고 계시진 않나요?

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail4ee05d33-b30c-431d-a26b-873d1462046a" style="width:100%; !important; height: 100%;"></center>

무려 작업 앞단의 프로세스인 전사 작업과 자막 작업을 무료로 빠르게 해결할 수 있다니!?

<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnaileb624328-795e-47a0-9809-91750ba9d2b5" style="width:60%; !important; height: 60%;"></center>
<center>위스퍼, 도댁체 외않써?</center>

 
당장 해야 할 것 같은 생각이 드신다면 잠시 멈추고 이 글을 끝까지 읽어주시길 부탁드립니다.
사실 저희 자메이크는 결코 이 방법을 권해드리고 싶지 않습니다. 언뜻 보면 여러분의 수고로움을 획기적으로 줄일 수 있을 것 같지만 기대하는 것만큼 드라마틱한 효과를 보기엔 어렵거든요.
위스퍼가 왜 아직은 설레발인지 다음 회에서 자세히 알려드릴게요.

 
 

```link
{"name": "2부 바로 보러가기", "url": "https://jamake.io/ko/insight/122", "type": "primary", "dataLog":"btn_post_editor_link_16bc6c63", "size":"medium"}
```

 
 

* * *
 
잠깐! 자메이크가 처음인가요? 첫 자막은 반값에 달아보세요! 신규 가입자 쿠폰팩 증정! <a href="https://jamake.io/ko/signUp?utm_source=insight&utm_medium=insight&utm_campaign=insight_to_signup">
<center><img src="https://jamake-asset-prod.s3.amazonaws.com/thumbnail18c49a5f-485a-44ba-bc71-d70ab07b6dc3" style="width:100%; !important; height: 100%;" alt="Clickable Image"></center>

OpenAI의 위스퍼가 실무에 도움이 될지 알아보자