Vevo — הדגמה

קוד פתוח

amphioncc-by-nc-4.02025-04-18

gradio

הכלי מחליף גוון קול, מעביר סגנון דיבור או מייצר דיבור מטקסט בלי אימון מוקדם על הדובר. הוא מיועד למי שרוצה לשנות הקלטות קוליות או להפיק קול מותאם אישית מכמה דגימות בסיסיות.

7.4 GBמשקל הקבצים
—הורדות בחודש
103לייקים

מה זה

הממשק מחולק לארבע לשוניות עבודה. בלשונית הגוון מעלים הקלטת מקור והקלטת יעד, והתוכנה מעבירה את גוון הקול בלבד תוך שמירה על צורת הדיבור המקורית. בלשונית הסגנון שומרים על גוון הקול של הדובר אבל מעתיקים את סגנון ההגשה כמו מבטא או רגש מהקלטת הייחוס. לשונית הקול מאפשרת להזין שתי דגימות ייחוס נפרדות, אחת לגוון ואחת לסגנון, ולהלביש את שתיהן על קובץ המקור.

לשונית הדיבור מטקסט מייצרת קובץ קול חדש לחלוטין. מזינים טקסט לקריינות, מגדירים שפה מתוך שש שפות נתמכות, ומצרפים הקלטות נפרדות לסגנון ולגוון יחד עם תמלול של קטע הסגנון. מתחת לכל הפעולות האלו רץ מודל Vevo של amphion, שמבצע הפרדה מבוססת למידה עצמית בין מאפייני הקול לתוכן.

מתאים ל

שינוי גוון קול בהקלטה
החלפת קול הדובר המקורי בקול אחר תוך שמירה מלאה על הקצב וההגשה.
העתקת סגנון ומבטא
הלבשת רגש, הדגשות או מבטא מהקלטה אחת על גבי דיבור של אדם אחר.
קריינות מטקסט בקול מותאם
יצירת דיבור בשפות נתמכות תוך שליטה נפרדת בגוון הקול ובסגנון ההקראה.

איפה זה נופל

אין כאן תמיכה בעברית בלשונית הקראת הטקסט, והאפשרויות מוגבלות רק לאנגלית, סינית, גרמנית, צרפתית, יפנית וקוריאנית. בנוסף, בקריינות מטקסט צריך לספק תמלול כתוב מדויק של הקלטת הסגנון, כך שאי אפשר פשוט לזרוק לשם כל קובץ בלי לדעת מה נאמר בו.

שאלות
נפוצות

האם השימוש בעמוד עולה כסף?

לא. העמוד פתוח לשימוש חופשי בדפדפן על גבי החומרה השיתופית שהוקצתה לו.

האם אפשר להריץ את המערכת על המחשב?

כן. הקוד והמודלים זמינים תחת רישיון MIT, כך שאפשר להוריד את המאגר ולהריץ אותו בסביבה מקומית עם מעבד גרפי מתאים.

האם אפשר לייצר דיבור מטקסט בעברית?

לא דרך הממשק הזה. לשונית הטקסט תומכת רק באנגלית, סינית, גרמנית, צרפתית, יפנית וקוריאנית.

איך מריצים

בוחרים את הלשונית הרצויה, טוענים את קבצי האודיו מהמחשב או מקליטים במקום, ולוחצים על כפתור הייצור. בלשונית הטקסט צריך גם להקליד את התוכן ולבחור את השפה המתאימה. הכל רץ על מעבד גרפי A10G דרך תשתית ענן מנוהלת. הזמנים תלויים בעומס על השרתים, וכשיש משתמשים נוספים תיתקל בהמתנה קצרה בתור עד תחילת העיבוד.

pip install -U huggingface_hub
hf download amphion/Vevo

הקבצים

13 קבצים במאגר, 7.4 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הפרויקט מופץ תחת רישיון MIT. הרישיון חופשי ומאפשר שימוש, שינוי והפצה, כולל שימוש מסחרי בקוד, כל עוד שומרים על הודעת זכויות היוצרים המקורית.

שינוי הקוד
חובת ייחוס
שימוש מסחרי: לא

הרישיון המלא בעמוד המודל ↗