GPT
V

quinoad/Voice-Clone-Multilingual

רץ בדפדפן

quinoadmit2024-08-04

  • gradio

מעלים הקלטת קול, מקלידים טקסט, ומקבלים קובץ שמע שמקריא את מה שכתבתם בקול המקורי. זה מיועד למי שרוצה לבדוק שיבוט קולי מהיר במספר שפות בלי להגדיר סביבת פיתוח.

  • הורדות בחודש
  • 125לייקים

מה זה

אתם מזינים טקסט בתיבה של שתי שורות, מעלים קובץ שמע עם דגימת הקול שאתם רוצים לשכפל, ובוחרים אחת מתוך שש עשרה שפות נתמכות. הפלט שמקבלים הוא קובץ שמע שנוצר מחדש עם הטקסט שלכם.

מאחורי הממשק רצה ספריית TTS יחד עם שרשרת שלמה של מודלים מוכרים. בין היתר נמצאים שם מודלים כמו Bark, Tortoise-tts-v2 ורכיבי עיבוד שמע כמו Hubert ו־Wav2vec2 של פייסבוק, שמנתחים את מאפייני הדיבור ומפיקים את גל הקול החדש לפי הדגימה שצירפתם.

מתאים ל

  • דיבוב לשפות זרות

    יצירת שמע בשפות כמו אנגלית או ספרדית מתוך הקלטה קיימת, תוך שמירה על גוון הקול המקורי.

  • בדיקת שיבוט קול

    בחינה מהירה של יכולות המודלים מבוססי Bark ו־Tortoise ישירות דרך הדפדפן.

  • הקראת טקסטים קצרים

    הפקת קובצי שמע מותאמים אישית לפרויקטים אישיים בשפות הנתמכות בממשק.

איפה זה נופל

עברית לא נמצאת ברשימת השפות הנתמכות, כך שהאפליקציה אינה מתאימה ליצירת דיבור בעברית. רשימת השפות מוגבלת לשש עשרה האפשרויות שמופיעות בממשק, ביניהן אנגלית, ערבית, רוסית וספרדית. בנוסף, חומרת המעבד החלשה מקשה על הפקה של קטעי טקסט ארוכים, ועלולה להוביל להמתנה ארוכה מאוד.

שאלות
נפוצות

האם השימוש עולה כסף?

לא, השימוש בממשק פתוח וחינמי לחלוטין בדפדפן. אתם לא נדרשים להזין אמצעי תשלום ואין מדרגות מחיר מובנות.

כמה זמן לוקח לייצר את האודיו?

בגלל שההרצה מתבצעת על מעבד בסיסי בלבד, הפקת הקובץ אינה מיידית. שילוב המודלים הכבדים גורם לכך שכל יצירה עשויה להימשך מספר דקות, במיוחד בטקסטים ארוכים.

האם אפשר להריץ את זה מקומית על המחשב?

כן, הקוד מבוסס על ספריות פתוחות ופורסם תחת רישיון MIT. אתם יכולים לקחת את הקוד ולהריץ אותו במחשב שלכם, רצוי עם מאיץ גרפי כדי לקצר זמנים.

האם אפשר לשבט קול בעברית?

לא, עברית אינה מופיעה ברשימת השפות לבחירה בממשק. האפליקציה מוגבלת לשפות המוגדרות מראש, כגון אנגלית, ערבית, גרמנית ורוסית.

איך משתמשים

לוחצים על כפתור ההפעלה אחרי שמילאתם את שלושת השדות: הטקסט, קובץ השמע והשפה. אין צורך בהרשמה או בהתחברות לחשבון כדי להשתמש בממשק. מאחר שהמערכת רצה על חומרת מעבד בסיסית בלבד וללא מאיץ גרפי, תהליך העיבוד והפקת השמע צפוי לקחת זמן מורגש, בייחוד כשמודלים כבדים כמו אלה מעורבים ביצירה.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, מה שמאפשר שימוש חופשי בקוד, שינוי שלו והרצה עצמאית, כולל לצרכים מסחריים. לגבי קובצי השמע שאתם מעלים או מפיקים, המידע אינו מפורט בממשק ותלוי בתנאי השימוש של פלטפורמת האחסון.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗