חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
P

Personal-TTS

רץ בדפדפן

kevinwang676mit2023-07-08

  • gradio

הדגמה שממירה טקסט בסינית לדיבור באמצעות שני קולות מוכנים מראש. היא מיועדת בעיקר למי שמחפש פתרון פשוט להקראת טקסטים בסינית עם שיפורי סאונד בסיסיים.

  • —הורדות בחודש
  • 63לייקים

מה זה

מזינים תיבת טקסט בסינית ובוחרים באחד משני כפתורי הפקה: קול נשי בשם נאנה או קול גברי בשם שיאוג'יה. בפלט מקבלים נגן אודיו עם הדיבור שנוצר, ומשם אפשר להריץ שני עיבודים נוספים. כפתור אחד מפעיל הרחבת רוחב פס לשיפור קצב הדגימה, והכפתור השני מנקה רעשים.

מאחורי הממשק רץ צינור עיבוד של ModelScope שמבוסס על SambertHifigan להמרת טקסט לדיבור. לשיפורי האודיו המשניים הקוד טוען את VoiceFixer לצד מודל BandwidthExtender בתדר 48 קילוהרץ שאומן על מאגר VCTK. הטקסט בממשק מציין תמיכה בסינית ואנגלית, אבל שדות ההזנה מוגדרים במפורש לטקסט סיני בלבד.

מתאים ל

  • הקראת טקסטים בסינית

    המרת משפטים בסינית לקובץ שמע באמצעות שני הקולות הקבועים מראש.

  • ניקוי קבצי דיבור

    בדיקת יכולות הסינון של VoiceFixer על האודיו שמופק ישירות מהמודל.

  • העלאת איכות דגימה

    הרחבת רוחב פס של האודיו לתדר של 48 קילוהרץ דרך המודל הייעודי.

איפה זה נופל

ההדגמה מוגבלת לשני קולות ספציפיים שהוטענו מראש, כך שאי אפשר לאמן או לשכפל כאן קול אישי למרות המילים שמופיעות בכותרת הממשק. מעבר לזה, העברית כלל לא נתמכת, והממשק כולו מוצג בסינית ללא תרגום. הבעיה המיידית היא המצב הטכני: היישום מדווח על שגיאת ריצה ולא מייצר אודיו בפועל.

שאלות
נפוצות

האם הכלי עובד כרגע בדפדפן?

לא. האפליקציה נמצאת במצב של תקלת ריצה ולא מגיבה לפעולות. צריך להמתין שהמפתח יתקן אותה או לקחת את הקוד ולהריץ אותו בסביבה משלכם.

האם אפשר להקליט את הקול שלי ולשכפל אותו?

לא דרך הממשק הזה. למרות הטקסטים בכותרת, אין שדה להעלאת הקלטות אישיות אלא רק שני כפתורים שמפעילים דמויות קוליות מוכנות.

האם יש תמיכה בעברית?

לא, המודלים והממשק מיועדים לטקסטים בסינית בלבד. הזנת אותיות בעברית לא תניב דיבור תקין.

אפשר להריץ את הקוד באופן מקומי?

כן, הקוד פתוח תחת רישיון MIT ומשתמש בספריות ציבוריות כמו ModelScope ו־VoiceFixer. תצטרכו להוריד את קובץ האפליקציה, להתקין את התלויות ולספק את משקלי המודל המתאימים.

איך משתמשים

נכנסים, כותבים את הטקסט בתיבה ולוחצים על אחד משני הקולות להפקה הראשונית. אם רוצים לשפר את התוצאה, לוחצים על הכפתור להעלאת קצב הדגימה או על כפתור סינון הרעשים כדי לקבל קבצי אודיו מעובדים בנגנים הנפרדים.

אין כאן צורך בהרשמה או התחברות. עם זאת, נכון לעכשיו החלל נמצא במצב שגיאת ריצה על מעבד בסיסי, כך שהוא לא יגיב בדפדפן עד שהמפתח יתקן את התקלה ויפעיל אותו מחדש.

הרישיון

הקוד מפורסם תחת רישיון MIT, מה שמאפשר שימוש חופשי, שינוי והרצה של הקבצים. הטקסט בממשק כולל בקשה מפורשת להשתמש בכלי לצורכי מחקר, למידה ובידור אישי בלבד, ולא לפגוע באנשים או בארגונים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗