GPT
R

rvc-genshin-impact — הדגמה

קוד פתוח

ArkanDashmit2023-05-13

  • gradio

הכלי ממיר קולות של דיבור או שירה לקולות של דמויות מתוך המשחק Genshin Impact. הוא מיועד למי שרוצה להפיק דיבוב או שירים עם הדמויות ישירות מהדפדפן.

  • 14.3 GBמשקל הקבצים
  • הורדות בחודש
  • 445לייקים

מה זה

אתם מעלים קובץ שמע, מקליטים מהמיקרופון, מדביקים קישור מיוטיוב או מזינים טקסט פשוט להקראה דרך edge-tts. אם העליתם שיר מלא, יש אפשרות להפריד את השירה מהמוזיקה בעזרת מודלים כמו Demucs או MDX לפני שהופכים את הקול.

העיבוד עצמו מתבסס על מודל RVC, ומספק תוצאה שבה הקול שלכם או של הזמר המקורי מוחלף בדמות שבחרתם מתוך הקטגוריות בממשק. בלשונית ההמרה אפשר לשנות גובה צליל בטרנספוזיציה, לשלוט בשיטת חילוץ הפיץ' ולכוונן פרמטרים של סינון וערבוב כדי לנקות רעשים.

מתאים ל

  • החלפת קול בשירים

    מפרידים את קול הזמר מקובץ או מיוטיוב וממירים אותו לקול של דמות מהמשחק.

  • הקראת טקסט בדמויות המשחק

    מזינים טקסט בממשק ה־TTS וממירים את הדיבור שנוצר לקול הנבחר.

  • דיבוב קטעי משחק

    מקליטים דיבור ישירות מהמיקרופון כדי להלביש אותו על סרטונים עם קולות הדמויות.

איפה זה נופל

אם אין למודל של הדמות קובץ טעון כראוי, הממשק יציג הודעת שגיאה על כך שהמודל חסר ולא יבצע המרה. הריצה על מעבד רגיל הופכת קבצים ארוכים לסיוט של המתנה, ולכן לא מומלץ להעלות לכאן פודקאסטים או רצועות ארוכות. חילוץ שירה מתוך שירים עמוסים עלול להשאיר עיוותים ורעשי רקע שנכנסים ישירות לקול הסופי.

שאלות
נפוצות

האם השימוש בכלי עולה כסף?

לא, הכלי פתוח וחינמי לגמרי לשימוש ישירות בדפדפן. אין צורך במנוי ואין דרישה להזין פרטי תשלום.

האם הקבצים שמעלים נשמרים בשרת?

הקבצים מעובדים מקומית על השרת שמריץ את הממשק באותו רגע. הם אינם מפורסמים במקום ציבורי, אך השרת זמני והקבצים עשויים להימחק כשההפעלה מתאפסת.

כמה זמן לוקח לכל המרה?

החומרה היא מעבד בלבד ללא האצת GPU, כך שההמרה אינה מיידית. הקלטה קצרה תיקח עשרות שניות, בעוד פירוק שיר מיוטיוב והמרתו יארכו כמה דקות.

האם אפשר להריץ את זה על המחשב האישי?

כן, הקוד מבוסס על ספריות פייתון פתוחות ורישיון MIT. מי שמחזיק מחשב עם כרטיס מסך מתאים יכול להוריד את הקבצים ולהריץ הכל מקומית במהירות גבוהה בהרבה.

במה זה שונה משימוש במודל RVC המקורי?

הממשק כאן כולל מודלים מוכנים של הדמויות וחיבור ישיר לכלים כמו הורדה מיוטיוב והקראת טקסט. במקום להתקין הכל מאפס ולאמן מודלים, הכל מוגדר ומוכן לשימוש בלחיצה.

איך מריצים

בוחרים דמות מתוך הטאבים, מגדירים את מקור השמע בלשונית הקלט, ועוברים ללשונית ההמרה כדי לכוון פיץ' ולהריץ. אין צורך בהרשמה או התחברות לחשבון כדי להשתמש בממשק.

הסביבה רצה על שרת מסוג cpu-upgrade ולא על מעבד גרפי ייעודי. עיבוד של קובץ שמע ארוך או פירוק שיר לקולות וכלים ייקח זמן וידרוש סבלנות, במיוחד כשיש עומס משתמשים במקביל.

pip install -U huggingface_hub
hf download ArkanDash/rvc-genshin-impact

הקבצים

71 קבצים במאגר, 14.3 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הפרויקט מפורסם תחת רישיון MIT שמאפשר שימוש, העתקה ושינוי של הקוד. עם זאת, הקולות שייכים לדמויות מתוך Genshin Impact ומוגנים בזכויות יוצרים, ולכן לא מומלץ להשתמש בתוצרים לצרכים מסחריים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא בעמוד המודל ↗