Ace-Step-v1.5

מה זה

אתם מזינים תיאור טקסטואלי חופשי, מגדירים ז'אנר, סולם, מקצב ומילים ביותר מ־50 שפות, או לחלופין מעלים קובץ שמע קיים. המערכת מחזירה קובץ מוזיקה מלא באורך שנע בין עשר שניות לעשר דקות, כולל אפשרות לקבל קובץ מילים מסונכרן בזמנים.

מאחורי הקלעים רץ שילוב בין מודל שפה שמתכנן את מבנה השיר ומרחיב את ההנחיות בשיטת שרשרת מחשבה, לבין מודל דיפוזיה מסוג Diffusion Transformer שמייצר את גלי השמע בפועל. היישום מריץ את גרסאות הטורבו כמו acestep-v15-turbo שמקצרות את תהליך הדיפוזיה לשמונה צעדים בלבד.

בנוסף ליצירה מאפס, הממשק מכיל כלים מתקדמים יותר לעיבוד אודיו, כולל יצירת גרסאות כיסוי, עריכה מקומית של מקטעים בקובץ, יצירת פלייבק לקול מוקלט והפרדת ערוצים.

מתאים ל

• הפקת שירים מטקסט

  יצירת שיר מלא עם שירה מלווה ומבנה מוגדר מתוך תיאור סגנון ומילים בעשרות שפות.

• יצירת פלייבק להקלטה

  העלאת ערוץ שירה נקי והפקה אוטומטית של ליווי מוזיקלי תואם לפי המקצב והסולם.

• עריכה ותיקון שמע

  ביצוע תיקונים מקומיים ברצועת שמע קיימת והחלפת קטעים נקודתיים בלי להפיק מחדש.

• חילוץ נתוני שמע ומילים

  ניתוח קובץ קול להוצאת נתוני BPM, סולם מוזיקלי ויצירת קובץ מילים מסונכרן.

איפה זה נופל

ההדגמה בדפדפן מריצה את דגמי הטורבו ולא את מודלי הבסיס המלאים, כך שהיא מוותרת על חלק מיכולות הפירוק וההרכבה של שירים שקיימות בקוד המקורי. בנוסף, חומרת ההדגמה החינמית לא תעמוד ביצירה מקבילה של שמונה שירים או בהרצת קטעים ארוכים מאוד של עשר דקות בלי להיתקע או לחרוג מזמני ריצה.

אותה משפחה

Ace-Step יצא ב־2 גרסאות שיש להן עמוד כאן. אלה האחרות, לפי כמה מורידים אותן.

איך משתמשים

נכנסים לממשק, בוחרים אם לכתוב תיאור פשוט או לשלוט במטא-דאטה, ולוחצים על כפתור היצירה. האפליקציה רצה על חומרת zero-a10g, מה שאומר שזמני העיבוד לא יהיו מהירים כמו על שרתי A100 ייעודיים, ובזמני עומס ייתכן שתמתינו בתור או שהמעבד הגרפי יידרש לכמה שניות כדי להתעורר.

הרישיון

הפרויקט מופץ תחת רישיון MIT שמאפשר שימוש חופשי, כולל לצרכים מסחריים. היוצרים מצהירים כי האחריות על זכויות יוצרים, שימוש בסגנונות מוגנים או יצירת תוכן מפר חלה על מי שיוצר ומעלה את החומרים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗