carpedm20/multi-speaker-tacotron-tensorflow

손석희 앵커의 목소리에 새로운 목소리를 함께 학습시키는데 궁금한 사항 질문 드립니다.

melonicedlatte opened this issue · 1 comments

안녕하세요. 올려주신 소스 잘 활용하고 있습니다.
다름이 아니라 손석희 앵커는 잘 학습이 완료되었고, 다른 사람의 목소리를 손석희 앵커의 모델과 함께 학습시키려고 하는데요.

Q1. 손석희 앵커의 목소리를 학습시킨 single 모드에서 --initialize_path=PATH_TO_CHECKPOINT 를 사용해서 학습을 하는 것이 가능한가요?? 아니면 그냥 무조건 multi speaker model 에서 학습을 시켜야 하나요??

Q2. 손석희 앵커와 김앵커를 함께 multi-model 에서 학습시키고 있는데, {'datasets/kim_anchor/data': 0.5, 'datasets/son/data': 0.5} 이런 항목이 나옵니다. 이 내용이 의미하는 것이 각각의 가중치인가요??

A1. 학습시키는 파라미터 수가 다르기 때문에 아마 안되지 않을까 생각합니다.
A2. 네. 데이터에 대한 가중치를 의미하는 것이 맞습니다. hparams.py 의
'main_data_greedy_factor': 0, 'main_data': [''], 'prioritize_loss': False,

이부분에서 main_data 지정이 가능합니다.