GPT
V

vits-models-genshin-bh3

רץ בדפדפן

zomehwhapache-2.02023-04-05

  • gradio

הכלי מייצר דיבור בקולות של דמויות ממשחקי מחשב מתוך טקסט בסינית וביפנית. הוא מתאים ליוצרים או מעריצים שמחפשים שורות קול ספציפיות בלי להקליט בעצמם.

  • הורדות בחודש
  • 82לייקים

מה זה

מקלידים טקסט בתיבה ייעודית, בוחרים שפה ולוחצים על כפתור ההפקה. בצד השני מקבלים נגן עם קובץ שמע מוכן להאזנה ולהורדה, לצד הודעת מערכת קצרה על התהליך.

מאחורי הקלעים רץ מודל VITS לסינתזת דיבור, שממיר טקסט ישירות לגל קול באמצעות ארכיטקטורת SynthesizerTrn. הממשק מחולק לפי קטגוריות ושמות של דמויות, ומאפשר לבחור בין אנגלית לסינית בשפת התפריטים. יש בו גם טקסטים לדוגמה שכבר שתולים בפנים כדי לבדוק את הצליל מיד.

בנוסף לשפה מקבלים סליידרים ידניים לקביעת מהירות הדיבור, מידת ההבעה הרגשית ומשך ההגייה של כל פונמה. יש אפשרות לשלב בין סינית ליפנית באותו משפט באמצעות תגיות ייעודיות, או להשתמש ברשימת סמלים פנימית.

מתאים ל

  • הפקת דיאלוגים קצרים

    יצירת קבצי שמע עבור סרטוני מעריצים או אנימציה שמבוססים על דמויות מוכרות.

  • השמעת טקסט משולב

    בדיקת שורות דיבור שמשלבות סינית ויפנית יחד בעזרת תיוג ייעודי בתוך המשפט.

  • כוונון מהירות והבעה

    התאמת רמת הרגש וקצב ההקראה של המשפט לפי צורכי הפרויקט.

איפה זה נופל

הכלי מוגבל לתקרה של מאה מילים בכל הרצה, כך שהוא לא מתאים לפסקאות ארוכות או קריינות שלמה. השפות הנתמכות הן סינית ויפנית בלבד, ואי אפשר להזין עברית או אנגלית כדי לקבל דיבור תקין. בנוסף, חומרת המעבד הבסיסית לא מאפשרת הפקה בזמן אמת, והתוצאה תלויה בדיוק של התגיות שהגדרתם למילים.

שאלות
נפוצות

האם השימוש בכלי כרוך בתשלום?

לא, הממשק פתוח לחלוטין לשימוש ישיר בדפדפן. אין צורך בהזנת פרטי תשלום ואין מנוי חודשי. אפשר להפיק קטעי שמע ללא עלות.

מה קורה עם הטקסט שמקלידים שם?

הטקסט נשלח לעיבוד במודל שרץ על השרת כדי ליצור את קובץ השמע. הוא מוצג בממשק הגרפי המקומי שלכם לצורך הניגון וההורדה. הקוד אינו מציין שמירה של המידע במאגר נתונים חיצוני.

כמה זמן לוקח לייצר קובץ שמע?

בגלל שהסביבה רצה על מעבד בסיסי, הפקת משפט קצר דורשת בדרך כלל מספר שניות. אם הטקסט ארוך ומתקרב למגבלת מאה המילים, זמן העיבוד יתארך בהתאם. במקרה של עומס משתמשים ייתכן עיכוב נוסף.

האם אפשר להריץ את זה מקומית על המחשב?

כן, הקוד בנוי על פייתון וספריות סטנדרטיות כמו PyTorch ו־Gradio. אפשר להוריד את קובצי המאגר ולהריץ את הקובץ app.py אצלכם. כדי לקבל מהירות טובה יותר מומלץ להשתמש במעבד גרפי.

איך משתמשים

בוחרים לשונית של דמות, מדביקים טקסט בתיבה ולוחצים Generate. אין צורך בהרשמה או התחברות לחשבון, והכל פתוח ישר בדפדפן. הכלי רץ על חומרת cpu-basic בסיסית, כך שפעולת היצירה אינה מיידית ולוקחת כמה שניות טובות לכל קטע קצר. אם יש עומס משתמשים במקביל, זמן ההמתנה מתארך.

הרישיון

הקוד מופץ תחת רישיון apache-2.0 שמאפשר שימוש חופשי ושינוי. הקבצים שנוצרים פתוחים להורדה ישירה מהדפדפן, אך לא מפורט מה מעמד זכויות היוצרים של דגימות הקול ודמויות המשחק המקוריות ששימשו לאימון.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗