ApplioX

מה זה

אתם מעלים קובץ שמע של דיבור או שירה, בוחרים מודל קול מתאים, ומקבלים קובץ אודיו חדש שבו המלל המקורי נשמע בקול אחר לגמרי. בנוסף להמרה הפשוטה, הממשק מכיל לשוניות ייעודיות להמרת טקסט לדיבור, כלי למיזוג בין שני מודלים שונים כדי לייצר גוון חדש, ולשוניות להורדת מודלים נוספים ואימון.

מאחורי הקלעים רץ הקוד של פרויקט Applio, שמתבסס על ארכיטקטורת RVC וספריות עיבוד קול מתקדמות. המערכת כוללת תמיכה בהרחבות צד שלישי ומאפשרת להריץ תהליכי הסקת מסקנות על בסיס קבצי משקולות מוכנים. קוד הממשק מראה חלוקה ברורה ללשוניות עבודה, כך שכל שלב, מבחירת הקובץ ועד עיבוד התוצאה, מתבצע בחלון ייעודי משלו בלי עומס מיותר.

מתאים ל

• החלפת קול בהקלטות

  מעלים קטע שירה או דיבור וממירים אותו לגוון קול של דמות אחרת לפי מודל שנבחר.

• המרת טקסט לדיבור

  מזינים טקסט כתוב בלשונית הייעודית ומפיקים קובץ שמע קולי באמצעות המודלים הזמינים.

• מיזוג מודלים קוליים

  משלבים בין שני קולות שונים בלשונית המיזוג כדי לייצר גוון דיבור חדש לחלוטין.

איפה זה נופל

ההרצה על חומרת המעבד החלשה כאן מוגבלת מאוד, ולא תאפשר אימון רציני של מודלים חדשים או עבודה בזמן אמת. המפתחים עצמם מצהירים שהפרויקט הגיע לבשלות וכבר לא מקבל עדכוני תכונות שוטפים אלא רק תיקוני אבטחה, כך שאין לצפות לשיפורים דרמטיים בעתיד הקרוב.

איך משתמשים

נכנסים לעמוד בדפדפן בלי צורך בהרשמה מוקדמת, עוברים ללשונית הרצויה, בוחרים קובץ שמע ומפעילים את העיבוד. העמוד הנוכחי מוגדר על חומרת מעבד בסיסית בלבד, מה שאומר שכל פעולת המרה או אימון תיקח זמן ממושך בהרבה לעומת הרצה על כרטיס גרפי. לפעולות כבדות מומלץ להיעזר במחברות קולאב שהמפתחים מציעים.

הרישיון

הפרויקט מופץ תחת רישיון MIT המאפשר שימוש מסחרי, שינוי והפצה של הקוד והמשקולות. עם זאת, שימוש בהתקנה הרשמית דורש עמידה בתנאי השימוש של המפתחים, לרבות שמירה על זכויות יוצרים של קבצי הקול שמעלים ומעבדים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗