본문 바로가기
  • 3D 종합 블로그 (블렌더, VRM, 코이카츠 , MMD 등)

Project SY3

아로나 목소리로 보컬로이드 만들기 - 03 여태까지 아로나의 목소리를 수제작으로 조교해 봤는데, 뭔가 마음에 안드는 점이 한두가지가 아니다. 그야 어쩔 수 없는게 음절 하나하나를 따와서 바늘 꿰듯이 끼워 맞추는지라 기계음이 안생길리가 없으며 자연스러운 발성도 나오지 않기 때문이다. 그렇다고 다른 음성 합성 엔진을 쓰자니 자연음을 추가로 따와야 해서 노가다를 더 이상 하고싶지 않았던 나는 단념하고 있었다. 때문에 그냥 포기하고 있던 와중……. 요즘 인공지능이 상당히 유행이라 하더라. 덕분에 많은 인공지능 기술이 생겨났는데, 걔중에는 'Diff-svc'라는것도 있었다. Diff-svc는 원하는 대상의 데이터셋을 기반으로 학습하여 특정 음성을 변환시키는 기술이다. 대상의 보이스 데이터만 충분하다면 실제로 말하지 않았던 대사도 진짜로 말한 것 처럼 원하.. 2023. 2. 23.
아로나 TTS로 보컬로이드 만들기 - 02 전편에서 UTAU를 사용하면 보컬로이드처럼 만들 수 있다는 사실을 보고 음원 제작을 하러 갔는데, 생각보다 자연스럽게 나오긴 커녕 기계음이 엄청 심하게 나와서 별로 만족스럽지가 않았다. 단순히 글자 하나하나만 녹음하는 '단독음'이 아니라 이어지는 발음 사이사이까지 녹음하는 '연속음'까지 녹음해줘야 그나마 자연스럽게 나온댄다. 근데 그렇게 하면 노가다가 최소 5배 이상은 뛸 것 같아서 결국 포기함. 추출한 발음들 어쨌거나 발음은 전부 추출했으니 하는 수 없이 수동 조교로 다시 한번 해보기로 했다. 추출한 발음들은 여기서 받을 수 있으니 관심있는 사람들은 받아가서 마음대로 쓰도록 하자. 이번에는 블루 아카이브의 하츠네 미쿠 콜라보 PV곡인 'Blue new world'를 아로나가 대신 불러보게 해 보았다. .. 2022. 2. 11.
아로나 TTS로 보컬로이드 만들기 - 01 아로나 - 블루 아카이브 블루 아카이브에는 주인공을 보좌하는 태블릿 속 AI컨셉의 캐릭터 아로나가 있다. 몰?루 인게임에서 이 캐릭터의 대사 보이스는 성우가 그대로 대사를 말하는 게 아니라 TTS로 나온다. 인위적으로 발음을 만들어 낼 수 있기에 이 특징을 살려 게임 시작할 때 플레이어의 닉네임을 직접 발음하게 설정할 수도 있다. 평소 TTS에 어느 정도 관심이 있었던 나는 닉네임을 불러준다는 기능이 참신하다 생각했고 동시에 한 가지 발상이 떠올랐다. 닉네임을 정할 때 각 히라가나 발음을 입력하고 바로 나가는 식으로 리세하면 TTS 발음을 전부 추출할 수 있지 않을까? 추출한 발음을 가지고 합성물 만들듯이 하면 보컬로이드처럼 만들 수 있을 것 같은데… 흐음……. 나는 곧바로 실행에 옮기기로 했다. 자그마.. 2022. 1. 24.