하지만 최근 막상 이런 보컬로이드의 치명적인 문제가 해결되었다
2020년 2월 22일 'NEUTRINO'라고 하는 소프트웨어가 릴리즈되었다
이 프로그램은 딥러닝으로 구축된 네트워크 신경망을 이용한 무료 AI 음성 합성 프로그램으로
악보 데이터를 받을 경우 발성 타이밍,· 음정,· 목소리음질, 호흡이나 목소리 쉰 상태 등을
신경망을 통해서 가장 좋은 결과로 추측되는 결과를 컴퓨터가 임의로 판단하여 합성한다는 소리.
God knows나 연애 서큘레이션 등을 작곡한 유명 작곡가인 코우사키 사토루가
트위터에 올린 영상이 화제가 되면서 알려지기 시작한다
과연 실제로 합성한 결과는 어떨까?
뉴트리노와 함께 기본 제공되는 라이브러리인 도호쿠 키리탄이 부른 절취선이라는 노래.
기계음이 섞여서 어설프게 사람이 따라한것만같은 이전의 보컬로이드와는 다르게
이번엔 반대로 인간목소리에 기계음을 일부러 섞었다고 착각할 정도로
인간이 부른듯한 자연스러움이 느껴진다.
참고로 이 노래는 사람의 편집이나 조교를 전혀 하지않은 노래로
즉, 사람이 안 만지고 악보만 던져줬음에도
프로그램이 대충 악보만 훑어보고 어디를 어떻게 부르게하면 되겠구나하고 판단하여 나온 결과가 이것이다
[위쪽캐릭터]
이 프로그램에서 목소리를 맡은 도호쿠 키리탄(성우:아카네야 히미카)이라는 캐릭터는
본래는 노래가 아닌 회화를 목적으로 제작된 보이스로이드라는 프로그램의 캐릭터중 하나로
도호쿠 지역의 홍보를 목적으로 나온 언니인 도호쿠 즌코라는 캐릭터의 여동생으로,
초등학생 5학년이며 게임을 심각하게 좋아하며 언니도 끔찍히 아낀다는 설정이자,
머리에 핸ㄷ..아니 식칼을 매달고다니는 특이한 악세사리와
등에 키리탄포라 불리는 어묵을 매달고다니는 특이한 패션의 보유자
허벅지가 이쁜것으로 유명한 언니때문인지 키리탄도 허벅지라인이 이쁜것으로 유명하며
캐릭터가 환상적으로 귀엽기떄문인지
독자들에게서의 이미지는 겜도 잘해서 독자들하고 맞장구도 잘 쳐주는데다
독설가에 매도잘하고 포상도 잘주는 초5 에로 변태 꼬맹이 취급을 받고 산다
초5에 로리꼬맹이라니 진리잖아..!
..........아무튼 프로그램 가격만 해도 대략 8만원을 넘는 고가의 캐릭터
약간 길이 딴데로 셌으니 다시 원래 이야기를 하자면
뉴트리노라고하는 이 음성합성 프로그램이 나온 이후로
보컬로이드 문화의 근원지였던 니코동에서도 뜨거운 관심을 보이고 있다.
프로그램 발매 5일도 안되서 벌써 영상이 250개가 넘을 정도..
이 소프트웨어는 무료로 누구나 제약없이 받을 수 있는것이 장점으로
도호쿠 키리탄 또한 기본적으로 내장되있는데,
즉 8만원이나 하는 고가의 보이스로이드 프로그램인 도호쿠 키리탄이 없어도
이 프로그램의 구동에는 아무런 제약이 없으며
악보와 가사만 있다면 사람이 부른 듯한 자연스러운 노래를 어려움 없이 합성할 수 있다는 것 또한 장점이다
이로인해 프로그램의 이름은 뉴트리노이지만
키리탄이 스스로 판단하여 노래를 부른다는 의미에서 인터넷에서는 AI키리탄이라고도 불린다
그냥 불러도 사람이 부르는것같은데
여기에 사람의 편집과 수정과 조교를 더한다면 더더욱 완성도가 높아진다
이번엔 사람의 수정을 거친 블루버드라는 노래
그야말로 인간 목소리에 전자음 살짝 섞은것같은 결과가 나온다
프로그램은 사이트에 접속하여
https://n3utrino.work/
두번째 프로그램만 받으면 끝
두번째 파일이 첫번째와 세번째 파일을 모두 내장하고있다.
다만 프로그램의 기동에는 musicxml 포맷으로 이루어진 XML파일이 필요한데
기본적으로는 musescore 같은 무료 소프트웨어나 악보 제작 프로그램을 통해서 구하면 된다.
대충 musescore 같은 프로그램으로 악보를 제작하고 export로 XML파일로 바꾸어주면 끝
딱히 musescore가 아니더라도 UtaFormatix를 쓰든 다른 악보프로그램을 쓰든
악보가 들어간 XML파일이면 뭐든 좋다. 그냥 이게 무료니까 권하는것
그 XML파일을 score/musicxml/
폴더에 넣어준다
그리고 메인폴더에 있는 run.bat를 메모장으로 열어주고
set BASENAME= 부분에 자신이 제작하려고하는 xml파일의 이름을 넣어주고 저장한다
그리고 run.bat를 실행하면
음악의 분량에 따라 몇분에서 몇십분까지 걸리고 그 결과가 output폴더에 저장된다
유튜브에 올라온것은 극히 소수로, 니코동 등지에서는 애니노래를 비롯해
유명한 미쿠노래등을 비롯해 온갖 노래를 다시 AI키리탄이 부른것으로 다시 부르게 하는 중이다.
이쯤되면 강제로 한국어를 부르게하면 어떻게 될까?하고 다들 한번씩 생각해볼 법한데
만약 한국어 노래로 시키고싶다면 이 프로그램이 다 그렇듯이 한본어 식으로 가사를 입력하면 된다.
손이 좀 많이 가긴하는데 되기는 된다.
드디어 사람 못지않은 기계 음성 합성 프로그램이 나왔으니
이제 남은것은 2D캐릭터들이 현실로 나오는 일뿐이지않을까?
그 날만을 기다리며 키리탄 벅지 페로페로..
