singing-songstarter
רץ בדפדפןnaterawרישיון לא דווח2024-04-19
מקליטים רעיון שירה בקול והופכים אותו לקטע מוזיקלי מלווה לפי תיאור טקסטואלי. מתאים למוזיקאים שרוצים לבדוק כיווני הפקה לסקיצות קוליות.
- —הורדות בחודש
- 184לייקים
מה זה
מזינים כאן שני דברים עיקריים: הקלטת אודיו עם שירה או זמזום, ותיאור טקסטואלי כמו כלי נגינה או ז'אנר. בנוסף אפשר לבחור סולם מוזיקלי מוגדר מראש לתיקון זיופים, או להשאיר את המערכת לזהות את התו הקרוב ביותר לבד, ולשלוט בהגדרות כמו משך הקטע בין 4 ל־30 שניות.
מאחורי הממשק רץ המודל nateraw/musicgen-songstarter-v0.2 שנשען על ספריית audiocraft של מטא. הקוד מבצע תיקון גובה צליל לקול שהוקלט, ומייצר במקביל עד ארבע גרסאות שונות של ליווי מוזיקלי לפי דגימת הסאונד וההנחיה הכתובה.
מתאים ל
- פיתוח סקיצה מזמזום
מקליטים מלודיה פשוטה מהראש ומקבלים ליווי סינת'י או מקצב היפ הופ סביבה.
- בדיקת סולמות ורעיונות
מיישרים שירה לא מדויקת לפי סולם מוגדר כדי לשמוע איך היא תישמע בהפקה.
- ייצור גרסאות ליווי מרובות
מפיקים עד ארבעה כיווני עיבוד שונים במקביל לאותו רעיון קולי.
איפה זה נופל
החיסרון הברור והמיידי הוא שהממשק פשוט מושבת כרגע ולא מנגן או מקבל קבצים. מעבר לזה, המודל מוגבל ליצירת מקטעים קצרים של עד 30 שניות בלבד, כך שלא תקבלו שיר שלם אלא רק בסיס ראשוני לרעיון.
שאלות
נפוצות
האם האפליקציה עובדת עכשיו בחינם?
היא מוגדרת כפתוחה וחינמית, אבל כרגע היא במצב שגיאת ריצה. עד שהיוצר לא יתקן את הקוד או את סביבת ההרצה, אי אפשר להפיק דרכה מוזיקה.
מה קורה עם ההקלטות שמעלים?
הקוד שומר את הקבצים בתיקיית דגימות מקומית בשרת. עם זאת, בגלל שלא פורסם רישיון מסודר, אין מדיניות פרטיות ברורה לגבי שמירת המידע.
אפשר להריץ את זה על המחשב שלי?
כן, הקוד מבוסס פייתון, גרדיו ו־audiocraft, והמודל זמין ברשת. תצטרכו חומרת GPU מתאימה כדי לעבד את האודיו בזמן סביר.
כמה זמן לוקח לייצר קטע מוזיקה?
הזמן תלוי באורך הקטע שבחרתם ובגודל הבאץ', עד 30 שניות לקטע. על גבי חומרת a10g זה אמור לקחת פחות מכמה דקות בודדות, כשהכלי פעיל.
איך משתמשים
נכון לעכשיו אי אפשר להשתמש באפליקציה ישירות בדפדפן כי היא מדווחת על שגיאת ריצה (RUNTIME_ERROR). באופן עקרוני היא מוגדרת לרוץ על מעבד גרפי a10g-small בגרדיו, כך שהעיבוד אמור להיות מהיר יחסית לכל באץ', אבל כל עוד השרת קרס אין גישה לכפתור ההפעלה.
הרישיון
הרישיון לא דווח בעמוד של הפרויקט. כשאין רישיון מוגדר, אין לדעת אם מותר להשתמש בתוצרים לצרכים מסחריים, ורצוי להיזהר מלהעלות חומרים רגישים או מוגנים בזכויות יוצרים.