SoulX-Singer — הדגמה
קוד פתוחSoul-AILabapache-2.02026-02-09
האפליקציה מייצרת שירה בקולות חדשים לחלוטין ללא אימון מוקדם, לפי מנגינה או קובץ תווים. היא פונה למוזיקאים, יוצרי תוכן וחוקרים שרוצים לבדוק סינתזת שירה והמרת קולות בדפדפן.
- 5.2 GBמשקל הקבצים
- —הורדות בחודש
- 183לייקים
מה זה
הממשק מחולק לשתי לשוניות עבודה, סינתזת שירה והמרת קול שירה. מזינים אליו דגימת קול של זמר, מילים, ושליטה מוזיקלית שמבוססת על מתווה גובה צליל או תווי מידי. הפלט שמתקבל הוא קובץ אודיו של שירה חדשה ששומרת על גוון הקול המקורי, תוך אפשרות לשנות את המילים או את הלחן.
מאחורי הקלעים רץ צינור עיבוד כבד. האפליקציה משתמשת במודל SoulX-Singer שאומן על יותר מ־42,000 שעות של שירה במנדרינית, אנגלית וקנטונזית. לצדו פועלת שרשרת שלמה של מודלים נוספים שמנקים הדהוד, מפרידים קולות מלווים, מנתחים דיבור ומייצרים את האודיו, כולל רכיבים כמו F5-TTS, Mel-Band-RoFormer, Whisper ו־Parakeet.
מתאים ל
- סינתזת שירה מקול קיים
הפקת שירה חדשה לגמרי מדגימת קול קצרה בלי צורך לאמן מודל ייעודי.
- עריכת מילים לשיר
שינוי מילות השיר בתוך קובץ שירה קיים תוך שמירה על הפרוזודיה וגוון הקול.
- המרת קול שירה
החלפת מבצע השיר בקול של זמר אחר דרך הלשונית הייעודית בממשק.
איפה זה נופל
החולשה העיקרית נמצאת בסנכרון. המפתחים מציינים בפירוש שצינור העיבוד האוטומטי לא תמיד מיישר נכון בין האודיו, המילים והתווים, ולתוצאה מדויקת צריך לתקן את המידע ידנית בעורך מידי נפרד. בנוסף, האימון התמקד במנדרינית, קנטונזית ואנגלית בלבד, כך שאין תמיכה מובנית בעברית, וההדגמה בדפדפן לא מחליפה עבודת עריכה ידנית מדוקדקת.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
לא. ההרצה בהאגינג פייס פתוחה לשימוש ללא תשלום על גבי תשתית הענן של הפלטפורמה.
כמה זמן לוקח לייצר שיר?
ההפקה עצמה נמשכת בין שניות ספורות לדקות אחדות בזכות כרטיס ה־A10G. אם המרחב היה במצב שינה, תידרש המתנה נוספת להפעלה ראשונית.
מה קורה אם האודיו יוצא לא מסונכרן?
זהו חיסרון מוכר של המערכת האוטומטית. המפתחים ממליצים להשתמש בממשק Midi-Editor נפרד כדי להתאים את המילים והתווים בצורה מדויקת לפני הפקת הסאונד הסופי.
האם אפשר להריץ את זה מקומית על המחשב?
כן. הקוד זמין בגיטהאב וניתן להוריד את המשקולות מהאגינג פייס, להפעיל את webui.py במחשב מקומי, אך נדרש לכך מעבד גרפי חזק של אנבידיה.
איך מריצים
נכנסים לממשק הגראדיו ובוחרים באחת הלשוניות, מזינים את קבצי האודיו והנתונים המוזיקליים, ולוחצים על הפקת השירה. האפליקציה רצה על חומרת zero-a10g שמספקת כוח עיבוד של כרטיס A10G לפי דרישה. כשהשרת חם העיבוד מתבצע תוך שניות עד דקות ספורות, אבל אם החומרה הייתה כבויה תצטרכו להמתין להקצאת המשאבים. אין צורך בהתחברות מיוחדת או בהרשמה כדי להתנסות.
pip install -U huggingface_hub hf download Soul-AILab/SoulX-Singer
הקבצים
7 קבצים במאגר, 5.2 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
בעמוד המרחב הרישיון מסומן כלא דווח, אך קוד הפרויקט בגיטהאב והמשקולות מפורסמים תחת רישיון Apache 2.0 שמאפשר שימוש חופשי למחקר ולפיתוח. היוצרים מגבילים מוסרית שימוש לרעה כמו התחזות לזמרים ללא רשות, ולא לוקחים אחריות על התוכן שתייצרו.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים