RVC_V2_Huggingface_Version
רץ בדפדפןCleberslalgpl-3.02023-09-21
המרת קול מקובצי שמע או הקלטה ישירה לקולות אחרים באמצעות מודל RVC V2. מתאים למי שרוצה לבדוק הסבת קול בלי להתקין סביבת פייתון מקומית.
- —הורדות בחודש
- 421לייקים
מה זה
מעלים קובץ קול או מקליטים ישירות דרך המיקרופון בממשק, בוחרים דגם קול מרשימה, ומקבלים פלט שמע מעובד. הממשק כולל גם אפשרות ליצירת דיבור מטקסט דרך מפתח ElevenLabs או שימוש בחינם עם GoogleTTS, וכן לשונית של Wav2Lip שמציעה להדביק את הדיבור על תמונת דמות כמו בן שפירו או אנדרו טייט.
מאחורי הקלעים רצה הספרייה של VoiceConversionWebUI המבוססת על פייטקולאב ורשתות נוירונים לשינוי גוון קול. יש שליטה ידנית על גובה הצליל (פיץ'), בחירת שיטת חילוץ תדר בסיסי (F0), שימוש באינדקס faiss לשמירה על דיוק הקול המקורי, והגדרות מתקדמות לסינון רעשים ודגימה מחדש.
מתאים ל
- החלפת קול להקלטה
המרת קובץ דיבור שהוקלט מראש לקול של מודל נבחר, כולל כוונון גובה הטון לפי הצורך.
- הפקת דיבור מטקסט
הזנת טקסט ותרגומו לקול באמצעות גוגל או חשבון חיצוני, ושימוש בו כבסיס להמרה.
- הנפשת תמונה לפי קול
התאמת תנועות שפתיים של פרצוף נבחר לקובץ האודיו המעובד דרך ממשק Wav2Lip.
איפה זה נופל
הבעיה המרכזית היא שהדף לא מתפקד ברשת עקב שגיאת קומפילציה, ולכן אי אפשר להשתמש בו ישירות בדפדפן. מעבר לכך, חוסר במאיץ גרפי הופך המרות קול וסנכרון שפתיים ב־Wav2Lip לאיטיים עד רמה לא מעשית. יצירת קול איכותי בטקסט לדיבור תדרוש מפתח פרטי בתשלום עבור שירות חיצוני, אחרת מקבלים את ההקראה הרובוטית הבסיסית של גוגל.
שאלות
נפוצות
האם האפליקציה פועלת כרגע בדפדפן?
לא, נכון לעכשיו היא נמצאת במצב BUILD_ERROR ולא נטענת בהצלחה באתר. כדי להשתמש בה יש צורך לשכפל את הקוד ולתקן את שגיאות ההרצה. לחלופין, אפשר להריץ אותה ישירות על מחשב אישי שתומך בסביבה הנדרשת.
האם השימוש בשירות כרוך בתשלום?
האפליקציה עצמה חינמית לחלוטין ומבוססת על קוד פתוח. יחד עם זאת, אם בוחרים להפיק דיבור באיכות גבוהה עם ElevenLabs, תידרשו להזין מפתח API פרטי שיכול לעלות כסף לפי תוכנית השימוש שלכם. האפשרות של GoogleTTS זמינה ללא תשלום אך באיכות פשוטה יותר.
האם אפשר להתקין ולהריץ את זה על המחשב?
כן, לפי התיעוד אפשר לשכפל את המאגר ולהריץ אותו על מערכת הפעלה אובונטו עם פייתון 3.8. המערכת דורשת הרצת סקריפט התקנה ייעודי לפני ההפעלה הראשונה. משתמשי ווינדוס אינם נתמכים על ידי סקריפט ההפעלה האוטומטי ויצטרכו להגדיר את התלויות ידנית.
מה קורה עם קובצי השמע וההקלטות שמעלים לשם?
הקבצים מעובדים מקומית על השרת שעליו רץ המופע של האפליקציה. מאחר שמדובר במרחב ציבורי, מומלץ לא להעלות הקלטות רגישות או פרטיות. מי שמעוניין בפרטיות מלאה צריך לשכפל את המרחב להרצה פרטית או לעבוד על מחשב מנותק מהרשת.
איך משתמשים
בוחרים מודל מהתפריט, מעלים שמע או מקליטים, ולוחצים על כפתור ההמרה. כרגע לא ניתן להריץ את זה באתר כי הדף נמצא במצב של שגיאת בנייה (BUILD_ERROR). אם מתקנים ומריצים, החומרה המוגדרת היא מעבד בסיסי בלבד ללא מאיץ גרפי, כך שכל עיבוד של קטע קצר ייקח דקות ארוכות מאוד.
הרישיון
הפרויקט מפורסם תחת רישיון lgpl-3.0, המאפשר שימוש חופשי ושינוי קוד כל עוד שינויים בספרייה עצמה נשארים תחת אותו רישיון. לגבי השמע שאתם מעלים או מפיקים, הרישיון לא תובע בעלות עליו, אך שימוש במודלים מאומנים של צד שלישי עשוי לכלול תנאים והגבלות נפרדים של יוצרי אותם מודלים.