티스토리 뷰

반응형

600step 파인튜닝 모델

600개 파일 처리 완료
600개 파일 처리 완료. 현재 CER: 0.0432
걔네는결혼도안한상태고너무젊죠 STT 결과
걔네는결혼도안한상태고너무젊죠 
원래 입력
0.0
그래서그래도누리씨는저기외식을좀참자주하는것같아요 STT 결과
그래서그래도누리씨는저기외식을좀참자주하는것같아요 
원래 입력
0.0
물론아침식사과일갈아서먹는거좋죠 STT 결과
물론아침식사과일갈아서먹는거좋죠 
원래 입력
0.0
되게아이들을차분하게만들어주는그런게있잖아 STT 결과
되게아이들을차분하게만들어주는그런게있잖아 
원래 입력
0.0
이런테미여행이진짜의미는것같아 STT 결과
이런테미여행이진짜의미있는것같아 
원래 입력
0.06666666666666667
감자빨리다먹어야되니까많이넣지요즘감자밥먹고있다 STT 결과
감자빨리다먹어야되니까많이넣지요즘감자밥먹고있다 
원래 입력
0.0

 

기본 Whipser large-v3

 

주변에운동하는공원이있다네그래서거기를갔대 STT 결과
주변에운동하는공원이있다네그래서거기를갔대 
원래 입력
0.0
비오는날은부침개먹는날이렇게머릿속에박혀있을정도죠 STT 결과
비오는날은부침개먹는날이렇게머릿속에박혀있을정도죠 
원래 입력
0.0
뭐육식이라든가생선이런거는엄청좋아해요 STT 결과
뭐육식이라든가생선이런거를엄청좋아해요 
원래 입력
0.05263157894736842
오늘뭐먹나막콩국수하고이런거대리만족하지 STT 결과
오늘뭐먹나막콩국수하고이런거대리만족하지 
원래 입력
0.0
저사람이나한테저렇게행동을하는구나 STT 결과
저사람이나한테저렇게행동을하는구나 
원래 입력
0.0
좋은거좀가려서먹고많이움직이고규칙적인생활하고 STT 결과
좋은거좀가려서먹고많이움직이고규칙적인생활하고 
원래 입력
0.0
살이쉽게빠진다거나그렇진않을거야 STT 결과
살이쉽게빠진다거나그렇진않을거야 
원래 입력
0.0
레시피그대로설탕두컵딱넣었고 STT 결과
레시피그대로설탕두컵딱넣었고 
원래 입력
0.0
그런데다이어트는음식을과하게좀덜먹고덜먹고 STT 결과
그런데다이어트는음식을과하게좀덜먹고덜먹고 
원래 입력
0.0
어릴때사탕이나초콜릿을별로좋아하지않았어요 STT 결과
어릴때사탕이나쪼꼬렛을별로좋아하지않았어요 
원래 입력
0.14285714285714285
900개 파일 처리 완료
900개 파일 처리 완료. 현재 CER: 0.0200
한데그런데올케는그공원을한바퀴만돌면힘들어하더라 STT 결과
한데그런데올케는그공원을한바퀴만돌면힘들어하더라 
원래 입력
0.0
그런데다들건강하게살고싶고다들안아프게살고싶어하지 STT 결과
그런데다들건강하게살고싶고다들안아프게살고싶어하지 
원래 입력
0.0
아주좋은것같아요최고예요최고 STT 결과
아주좋은것같애요최고예요최고 
원래 입력
0.07142857142857142
타고나는것이훨씬더지배적인거같애 STT 결과
타고나는것이훨씬더지배적인거같애 
원래 입력
0.0
그래서어디에빠져죽고뭐그런얘기를 STT 결과
그래서어디에빠져죽고뭐그런얘기를 
원래 입력
0.0
하기는하면서도모르겠다그래도이거라도해야지이런마음이지 STT 결과
하기는하면서도모르겠다그래도이거라도해야지이런마음이지 
원래 입력
0.0
맛있더라피클그자체가애들입맛에딱맞더라고 STT 결과
맛있드라피클그자체가애들입맛에딱맞더라고 
원래 입력
0.05
내탓에가지고약을먹을줄모르는거야 STT 결과
내다리가지고약을먹을줄모르는거야 
원래 입력
0.125
맞다우리휴일날로망이뭐지 STT 결과
맞다우리휴일날로망이뭐지 
원래 입력
0.0
친구아버지도처음에는다리때문에병원에간거야 STT 결과
친구아버지도처음에는다리때문에병원에간거야 
원래 입력
0.0
910개 파일 처리 완료
910개 파일 처리 완료. 현재 CER: 0.0200
그반찬이해도그래도그게우리나라식이잖아요 STT 결과
그반찬이해도그래도그게우리나라식이잖아요 
원래 입력
0.0
그렇다고건강관리안했다고해서안아픈것도아니고 STT 결과
그렇다고건강관리안했다고해서안아픈것도아니고 
원래 입력
0.0
내가약에매달리고있는거같애 STT 결과
내가약에매달리고있는것같애 
원래 입력
0.07692307692307693

굉장히 잘 나온다.

 

잘못하는 건 이정도

그러면자꾸우려기해서개발을해가지고 STT 결과
그러면자꾸의료계에서개발을해가지고 
원래 입력
0.23529411764705882

 

Whipser large-v2

159970
자기가그다이어트한다고이제몸이너무안좋죠. STT 결과
자기가그다이어트한다고이제몸이너무안좋죠 
원래 입력
0.047619047619047616
또안따라가줄때이게젊은사람같지않잖아요. STT 결과
또안따라가줄때이게젊은사람같지않잖아요 
원래 입력
0.05
이제생선하고나물익혀하는데맨날그반찬이한정적이긴해요. STT 결과
이제생선허고나물이케하는데맨날그반찬이한정적이긴해요 
원래 입력
0.14814814814814814
아무래도점없지않아그런현상이있겠죠? STT 결과
아무래도좀없지않아그런현상이있겠죠 
원래 입력
0.1111111111111111
보니까다요가동작이더라구요. STT 결과
보니까다요가동작이더라고요 
원래 입력
0.14285714285714285
사람맞춰야되고이러다보니까그게또힘들어지더라고. STT 결과
사람맞춰야되고이러다보니까그게또힘들어지더라고 
원래 입력
0.041666666666666664
그래서아휴그런데올케는살이많이쪘어. STT 결과
그래서아휴그런데올케는살이많이쪘어 
원래 입력
0.05555555555555555
맞아요즘가격도정말많이싸졌어. STT 결과
맞어요즘가격도정말많이싸졌어 
원래 입력
0.13333333333333333
무릎이계속아프다고하시고몸이전체적으로안좋죠. STT 결과
무릎이계속아프다고하시고몸이전체적으로안좋죠 
원래 입력
0.043478260869565216
엄마는폐렴이됐으면심각했을거야. STT 결과
엄마는폐렴이됐으면심각했을거야 
원래 입력
0.0625
10개 파일 처리 완료
10개 파일 처리 완료. 현재 CER: 0.0860
그러니까애들입맛이피클이다. STT 결과
그니까애들입맛이피클이다 
원래 입력
0.14285714285714285
결국은나중에마지막에는버린다. STT 결과
결국은나중에마지막에는버린다 
원래 입력
0.06666666666666667
커피집마다막사람들이꽉다차가있더라. STT 결과
커피집마다막사람들이꽉다차가있드라

 

중간에 들어간 것들을 인식하지 못하는 문제도 존재

동화책을많이읽어주는데 STT 결과
동화책을인제읽어주는많이읽어주는데 
원래 입력
0.5454545454545454

 

Whisper-large

 

large가 오히려 준수

뭐야닥터스트레인지그런프로그램다봤으니까 STT 결과
뭐야닥터스트레인지그런프로그램다봤으니까 
원래 입력
0.0
우리도다른사람이담아주는거였나엄마가담가준거였나 STT 결과
우리도다른사람이담아주는거였나엄마가담궈준거였나 
원래 입력
0.041666666666666664
저녁야식을너무많이먹더라구요 STT 결과
저녁야식을너무많이먹더라고요 
원래 입력
0.07142857142857142
다른거매실같은거는빨리안떼면안된다하더라고 STT 결과
다른거매실같은거는빨리안뜨면은안된다하더라고 
원래 입력
0.09523809523809523
그랬더니애가너무너무무서워하는거야 STT 결과
그랬더니애가너무너무무서워하는거야 
원래 입력
0.0
그런데빨리를내가내려갈수가없는거야 STT 결과
그런데빨리를내가내려갈수가없는거야 
원래 입력
0.0
그논까지빼내게되고그러니까이게엄마는견뎠지 STT 결과
그농까지빼내게되고그러니까이게엄마는견뎠지 
원래 입력
0.047619047619047616
선진국이라말하는나라들의국민들을보면은 STT 결과
선진국이라말하는나라들의국민들을보면은 
원래 입력
0.0
지금편의점이런데너무잘돼가나오는것같더라 STT 결과
지금편의점이런데너무잘돼가나오는거같드라 
원래 입력
0.1
그런거참잘하더라고보니까그러니까역시달라 STT 결과
그런거참잘하더라고보니까그러니까역시달라 
원래 입력
0.0
330개 파일 처리 완료
330개 파일 처리 완료. 현재 CER: 0.0435
봉계지금며칠이었는데그때웬만한 STT 결과
본게지금며칠며칠이었는데그때에웬만한 
원래 입력
0.3333333333333333
반찬가게에서도살수있고편의점에서도잘나오니까 STT 결과
반찬가게에서도살수있고편의점에서도잘나오니까 
원래 입력
0.0
근데그게얼마나훌륭한생각인지몰라 STT 결과
근데그게얼마나훌륭한생각인지몰라 
원래 입력
0.0
근데그필라텍스할때그전에내가가보면 STT 결과
근데그필라텍스할때그전에내가가보면 
원래 입력
0.0
무조건굶기,다이어트무조건굶어서살을뺀다고하죠 STT 결과
무조건굶기다이어트무조건굶어서살을뺀다고하죠 
원래 입력
0.043478260869565216
뭐판타지희열음을그런이주로보고 STT 결과
뭐판타지히어로물그런위주로보고 
원래 입력
0.3333333333333333
나름대로또내가좋아하는음식만하다보니까 STT 결과
나름대로또내가좋아하는음식만하다보니까 
원래 입력
0.0
아니죠옛날에는칼로쬐야수수비가나왔는데 STT 결과
아니죠옛날에는칼로째야수술비가나왔는데 
원래 입력
0.10526315789473684
또파랗게될까봐위에막비닐을,검정비닐을덮어 STT 결과
또파랗게될까봐위에막비닐을껌정비닐을덮어 
원래 입력
0.09523809523809523
그래서내가한1년만하고말았거든 STT 결과
그래서내가한일년만하고말았거든 
원래 입력
0.06666666666666667
340개 파일 처리 완료
340개 파일 처리 완료. 현재 CER: 0.0447
새로생긴오래된커피집에는거의사람들도없었어 STT 결과
새로생긴오래된커피집에는거의사람들도없었어 
원래 입력
0.0
아무래도좀없지않아그런현상이있겠죠 STT 결과
아무래도좀없지않아그런현상이있겠죠 
원래 입력
0.0
황박사님은걷기를좋아하더라매일걸으신데 STT 결과
황박사님은걷기를좋아하더라매일걸으신대 
원래 입력
0.05263157894736842
그래도커피향은너무좋아해특히아침커피향 STT 결과
그래도커피향은너무좋아해특히아침커피향 
원래 입력
0.0

 

Whisper-medium

medium은 large보다 2배정도 빠르다. 하지만 large v2하고 정확도가 비슷

근데 오타가 조금 많아서 못 쓸 것 같다.

그냥뭐리조트나호텔같은데몸으로하면서 STT 결과
그냥뭐리조트나호텔같은데머무르면서 
원래 입력
0.2222222222222222

뭐금으로만든팔찌나비싸할머니토기이런것들도많잖아 STT 결과
뭐금으로만든팔찌나빗살무늬토기이런것들도많잖아 
원래 입력
0.20833333333333334

 

+이틀 전에 나온 Turbo 버전

970개 파일 처리 완료. 현재 CER: 0.0236
노인남여_노인대화07_F_HJS00_64_수도권_녹음실_08497.wav 처리 시간: 0.9752초
이게나는외식하는걸내가싫어해요 STT 결과
이게나는외식하는걸내가싫어해요 
원래 입력
0.0
노인남여_노인대화07_F_HJS00_64_수도권_녹음실_08421.wav 처리 시간: 0.9984초
또안따라가줄때이렇게젊은사람같지않잖아요 STT 결과
또안따라가줄때이렇게젊은사람같지않잖아요 
원래 입력
0.0
노인남여_노인대화07_F_JYJ00_61_수도권_녹음실_07410.wav 처리 시간: 1.0498초
애들이렇게가르쳐본사람이자녀교육이다르다는걸알게되었어 STT 결과
애들이렇게가르쳐본사람이자녀교육이다르다는걸알게되었어 
원래 입력
0.0
노인남여_노인대화07_M_LMS00_65_수도권_녹음실_08223.wav 처리 시간: 0.9983초
먹느냐또자기가관리를어떻게하느냐에따라서 STT 결과
먹느냐또자기가관리를어떻게하느냐에따라서 
원래 입력
0.0
노인남여_노인대화07_F_HJS00_64_수도권_녹음실_07374.wav 처리 시간: 0.9929초
경치가제일좋은음식점이라고소문이났대 STT 결과
경치가제일좋은음식점이라고소문이났때 
원래 입력
0.05555555555555555
노인남여_노인대화07_F_LSS00_65_수도권_녹음실_08106.wav 처리 시간: 1.0342초
오육칠팔구십이제결론까지가면십이된다는거지 STT 결과
오육칠팔구십이제결론까지가면십이된다는거지 
원래 입력
0.0
노인남여_노인대화07_F_LSS00_65_수도권_녹음실_07951.wav 처리 시간: 0.9707초
또저병원과똑같은받고일했어 STT 결과
또저병원가똑같은받고이랬어 
원래 입력
0.23076923076923078
노인남여_노인대화07_F_YEL00_62_수도권_녹음실_08087.wav 처리 시간: 0.9938초
저때문에읽고받고해가지고아주뭐지식이많아 STT 결과
저때문에읽고봤고해가지고아주뭐지식이많아 
원래 입력
0.05
노인남여_노인대화07_F_PYJ00_67_수도권_녹음실_07468.wav 처리 시간: 0.9952초
딱그림이있으면그그림에대한거를누군가가 STT 결과
딱그림이있으면그그림에대한글을누군가가 
원래 입력
0.10526315789473684
노인남여_노인대화07_F_JML00_61_수도권_녹음실_07661.wav 처리 시간: 0.9969초
요리교실좀안다니고뭐하냐고그러지 STT 결과
요리교실좀안다니고뭐하냐고그러지 
원래 입력
0.0
980개 파일 처리 완료
980개 파일 처리 완료. 현재 CER: 0.0237
노인남여_노인대화07_F_YEL00_62_수도권_녹음실_08110.wav 처리 시간: 1.0309초
이걸로인해서또다른병이또합병증이또오겠지 STT 결과
이걸로인해서또다른병이또합병증이또오겠지 
원래 입력
0.0
노인남여_노인대화07_F_HJS00_64_수도권_녹음실_08644.wav 처리 시간: 1.0335초
블랙핀스라든가없지않아그런영향이많이있겠죠 STT 결과
블랙팬서라든가없지않아그런영향이많이있겠죠 
원래 입력
0.09523809523809523
노인남여_노인대화07_F_HJS00_64_수도권_녹음실_07442.wav 처리 시간: 1.0540초
스토리를이어가는걸보니까요즘동화작가들이멋지다생각했죠 STT 결과
스토리를이어가는걸보니까요즘동화작가들이멋지다생각했죠 
원래 입력
0.0
노인남여_노인대화07_F_LAJ00_63_수도권_녹음실_07822.wav 처리 시간: 1.0132초
벌써양쪽무릎을다수술을한친구들도많고 STT 결과
벌써양쪽무릎을다수술을한친구들도많고 
원래 입력
0.0
노인남여_노인대화07_M_LK000_61_수도권_녹음실_07316.wav 처리 시간: 0.9935초
이제전혀잡하지않다가이제어른이되어가지고 STT 결과
이제전혀접하지않다가이제어른이되어가지고 
원래 입력
0.05
노인남여_노인대화07_F_LSS00_65_수도권_녹음실_07779.wav 처리 시간: 1.0326초
옳게도그렇고나도그렇고다른건안하니까그거라도해야지뭐 STT 결과
올케도그렇고나도그렇고다른건안하니까그거라도해야지뭐 
원래 입력
0.07692307692307693
노인남여_노인대화07_M_LK000_61_수도권_녹음실_08450.wav 처리 시간: 0.9983초
그리고그음식을해줌으로써가족들이먹고어떤느낌과 STT 결과
그리고그음식을해줌으로써가족들이먹고어떤느낌과 
원래 입력
0.0
노인남여_노인대화07_F_JHR00_61_수도권_녹음실_07979.wav 처리 시간: 1.0399초
그러니까그리고스트레스를안받아야될거같애 STT 결과
그러니까그리고스스트레스를안받아야될것같애 
원래 입력
0.1
노인남여_노인대화07_F_LAJ00_63_수도권_녹음실_07920.wav 처리 시간: 1.0187초
애가하루가다를때푹푹넘어가고있더라는거야 STT 결과
애가하루가다르대푹푹넘어가고있더라는거야 
원래 입력
0.1
노인남여_노인대화07_F_JHR00_61_수도권_녹음실_07467.wav 처리 시간: 1.0005초
아직까지그런교육이별로우리나라는발달을안했어 STT 결과
아직까지그런교육이별로우리나라는발달을안했어 
원래 입력
0.0
990개 파일 처리 완료
990개 파일 처리 완료. 현재 CER: 0.0239
노인남여_노인대화07_F_CSO00_62_수도권_녹음실_07412.wav 처리 시간: 0.9807초
옛날우리우리때는옛날동화책같은거있잖아 STT 결과
옛날우리우리때는옛날동화책같은거있잖아 
원래 입력
0.0
노인남여_노인대화07_M_LK000_61_수도권_녹음실_07415.wav 처리 시간: 1.0088초
산을통과하는데팥죽주면안잡아먹지 STT 결과
산을통과하는데팥죽주면안잡아먹지 
원래 입력
0.0
노인남여_노인대화07_M_LMS00_65_수도권_녹음실_08194.wav 처리 시간: 0.9639초
중요하다고생각해자기는어때 STT 결과
중요하다고생각해자기는어때 
원래 입력
0.0
노인남여_노인대화07_F_JYJ00_61_수도권_녹음실_08570.wav 처리 시간: 1.0375초
남편이그하루에밥한끼라도안먹으면은안된다하는거는 STT 결과
남편이그하루에밥한끼라도안먹으면은안된다하는거는 
원래 입력
0.0
노인남여_노인대화07_F_JHR00_61_수도권_녹음실_07812.wav 처리 시간: 0.9849초
그런데이제약을안먹으면마음이불안해 STT 결과
그런데이제약을안먹으면마음이불안해 
원래 입력
0.0
노인남여_노인대화07_M_LMS00_65_수도권_녹음실_08157.wav 처리 시간: 1.0150초
오늘친구엄마얘기가나와서그집은막왜이렇게멋쟁이야 STT 결과
오늘친구엄마얘기가나왔어그집은막왜이렇게멋쟁이야 
원래 입력
0.08333333333333333
노인남여_노인대화07_F_JHR00_61_수도권_녹음실_08084.wav 처리 시간: 0.9996초
근데우리가그걸감지를못하기때문에결론이그런거지 STT 결과
근데우리가그걸감지를못하기때문에결론이그런거지 
원래 입력
0.0
노인남여_노인대화07_M_KMS00_64_수도권_녹음실_08690.wav 처리 시간: 0.9796초
그러면자꾸우려계에서개발을해가지고 STT 결과
그러면자꾸의료계에서개발을해가지고 
원래 입력
0.11764705882352941
노인남여_노인대화07_F_KMK00_61_수도권_녹음실_07774.wav 처리 시간: 1.0135초
혼자아파트한시간돈다고도는건데이게맞는건진잘모르겠어 STT 결과
혼자아파트한시간돈다고도는건데이게맞는건진잘모르겠어 
원래 입력
0.0
노인남여_노인대화07_M_LK000_61_수도권_녹음실_08486.wav 처리 시간: 1.0089초
한정식이라생각해서그건강식이다생각하고먹긴하죠 STT 결과
한정식이라생각해서그건강식이다생각하고먹긴하죠 
원래 입력
0.0
1000개 파일 처리 완료
1000개 파일 처리 완료. 현재 CER: 0.0239

 

똑같이 힘든 건 매한가지

노인남여_노인대화07_M_KMS00_64_수도권_녹음실_08690.wav 처리 시간: 0.9796초
그러면자꾸우려계에서개발을해가지고 STT 결과
그러면자꾸의료계에서개발을해가지고 
원래 입력
0.11764705882352941

 

large-v3 보다 약간 더 CER이 떨어지지만 속도는 0.6배이다. 이 정도면 매우 준수하다.

turbo를 파인튜닝해야 할지도 모르겠다.

 

그 아래 버전으로는 볼 필요가 없을 듯 싶다.

 

최종적으로는 large-v3, Turbo가 가장 일반화가 잘 되어 있기에 적합하다는 판단을 내린다.

 

 

 

반응형