DiffRhythm
רץ בדפדפןASLP-labapache-2.02025-03-02
הכלי מייצר שירים מלאים עם שירה ומוזיקה מתוך מילות שיר והנחיות סגנון, ומתאים למי שמחפש יצירת שמע מבוססת בינה מלאכותית בדפדפן בלי להגדיר שרת עצמאי.
- —הורדות בחודש
- 689לייקים
מה זה
אתם מזינים מילים בפורמט מסונכרן זמנים של קובץ מילים, ובוחרים סגנון מוזיקלי באמצעות הנחיית טקסט רגילה או קובץ שמע שמשמש כדוגמת סגנון. ביציאה מקבלים קובץ שמע מלא בפורמט של שיר, וניתן לבחור להוריד אותו כקובץ אמ פי שלוש, וואב או אוג.
מאחורי הקלעים פועלים מודלים של דיף-רית'ם בשילוב רכיבי שמע של מיו-קיו לחילוץ וייצוג מוזיקלי, לצד מפענח שמע ומודל דיפוזיה. בממשק יש גם לשונית ייעודית לכתיבת מילים לפי נושא ותגיות סגנון, או להוספת חותמות זמן למילים קיימות, כולל דוגמאות מובנות של קובצי שמע, טקסט ומילים מוכנות שמדגימות שירי פופ, בלדות ומקצבים שונים.
מתאים ל
- הפקת סקיצות מוזיקליות
יצירת שיר מלא עם שירה תוך שניות כדי לבדוק רעיון מוזיקלי או כיוון של הפקה.
- תזמון מילים לשירים
המרת טקסט רגיל למבנה עם חותמות זמן מוכנות לשילוב במודלי שמע.
- חיקוי סגנון לפי דגימה
העלאת קטע שמע קצר כהנחיה כדי לקבל שיר חדש עם גוון צליל וקצב דומים.
איפה זה נופל
הכלי מסתמך על מילים עם חותמות זמן מדויקות, ואם המבנה שלהן לא מתוזמן כראוי התוצאה המוזיקלית תישמע מקוטעת ולא מסונכרנת. יצירת המילים המובנית תומכת רשמית רק באנגלית ובסינית, כך שמי שמחפש שירה בעברית יצטרך להכין קובץ מילים מתוזמן בעצמו ולבדוק אם המודל מתמודד עם הפונטיקה. כמו כן, הרצה מבוססת זירו ג'יפייו עלולה להתנתק באמצע אם העומס על השרתים בשיא.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
לא, השימוש בדף הזה פתוח וחינמי לחלוטין. הוא רץ על תשתית ציבורית שמקצה משאבי מחשוב ללא תשלום.
האם אפשר להריץ את המערכת על המחשב?
כן, הקוד והמודלים פתוחים ברישיון אפאצ'י שתיים אפס. אפשר להוריד את המשקולות ולהריץ אותם מקומית עם מעבד גרפי מתאים של אנבידיה.
כמה זמן לוקח לייצר שיר שלם?
משך הזמן תלוי באורך השיר שתבחרו ובשיטת החישוב, בין איכות גבוהה למהירות. על מעבד גרפי איי עשר ג'י זה בדרך כלל לוקח בין כמה עשרות שניות לדקות בודדות, לא כולל זמן המתנה בתור.
מה קורה לקבצים שאני מעלה?
קבצי השמע והטקסט מעובדים בשרת בזמן ההרצה כדי לייצר את הפלט. אין כאן שמירה אישית של פרויקטים, והסשן מתאפס ברענון הדפדפן.
איך משתמשים
לוחצים על כפתור הייצור בלשונית המוזיקה וממתינים. ההרצה מתבצעת על חומרת זירו איי עשר ג'י, שמוקצית לפי דרישה ומפעילה מעבד גרפי של אנבידיה. אין צורך בהתחברות או ברישום כדי להריץ, אבל בגלל שמדובר במשאב שיתופי עשוי להיות תור לפני שהעיבוד מתחיל בפועל. ניתן לשלוט באורך הקטע, בבחירה בין איכות למהירות, ובמספר צעדי הדגימה בהגדרות המתקדמות.
הרישיון
הפרויקט מפורסם ברישיון אפאצ'י שתיים אפס, שמתיר שימוש אישי ומסחרי בקוד ובמשקולות. התוכן שאתם מעלים והשמע שמופק מנוהלים בהתאם לתנאי השימוש הרגילים של השרת המארח.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים