RefineGAN: توليد الموجة الصوتية عالمياً بشكل أفضل من الحقيقة الأساسية بدقة عالية في الارتفاع و
"أفضل من الحقيقة الأساسية" هو نوع الادعاء الذي يجعلك إما تدير عينيك أو تضغط على التشغيل.
"أفضل من الحقيقة الأساسية" هو نوع الادعاء الذي يجعلك إما تدير عينيك أو تضغط على التشغيل. يدعم RefineGAN هذا بمشفر صوتي عصبي يعيد بناء الموجات الصوتية برد استجابة الارتفاع والكثافة دقيق جداً بحيث يفضل المستمعون أحياناً الإخراج المركب على التسجيلات الأصلية — وهي الأولى في مجال GAN-vocoder. الخدعة هي بنية تحسين موجهة بالارتفاع تبدأ من إشارة قالب تقريبية وتصقلها بشكل متكرر تحت خسائر طيفية وخصومية متعددة المستويات.
بعيداً عن أرقام MOS المثيرة للإعجاب، يعمم RefineGAN عبر المغنيين والمتحدثين وحتى اللغات غير المرئية دون إعادة التدريب، وهذا مهم إذا كنت تشحن TTS أو تحويل الصوت بحجم كبير. يشرح الحديث المولد القائم على القالب، ولماذا يكون تحديد الارتفاع هو ما يفتح مكاسب الدقة، وأين يناسب النموذج بجانب HiFi-GAN وأحفاده. إذا كنت تبني أي شيء يحول طيف ميل مرة أخرى إلى صوت — TTS وتركيب الغناء واستنساخ الصوت — فإن أفكار التصميم هنا تستحق الاستعارة.
