חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
R

rwkv-music

רץ בדפדפן

mrfakenameother2024-02-20

  • gradio

הכלי מייצר קטעי מוזיקה בפורמט מידי באמצעות מודל שפה ייעודי. הוא מתאים למוזיקאים ומפיקים שמחפשים רעיונות מלודיים גולמיים לעבודה בתוכנות עריכה.

  • —הורדות בחודש
  • 74לייקים

מה זה

במקום להעלות קובצי קול, אתם בוחרים הגדרות פשוטות בממשק: הגבלה לפסנתר בלבד, שימוש בגרעין מלודי מוכן, וקביעת אורך היצירה בטוקנים בין 4 ל־4096. אפשר גם להפעיל מצב מורחב שמגיע עד 32,768 טוקנים, למרות שהקוד מזהיר מראש שזה חורג מחלון ההקשר המקורי ועלול לגרור שגיאות.

התוצאה שמתקבלת כוללת רשימת טוקנים טקסטואלית, קובץ מידי מוכן להורדה, ונגן שמע שממיר את הצלילים בעזרת פלואיד-סינת'. מאחורי הקלעים רץ המודל BlinkDL/rwkv-4-music בגרסת 560 מיליון פרמטרים, יחד עם טוקנייזר ייעודי שממיר פקודות נגינה למילים שהארכיטקטורה יודעת לעבד.

מתאים ל

  • סקיצות לפסנתר

    יצירת קובצי מידי מהירים של פסנתר בלבד לייבוא ישיר לתוכנת הפקה מוזיקלית.

  • המשך רעיונות מלודיים

    שימוש בכפתור ההמשך כדי לבנות רצף צלילים ארוך על בסיס מלודיה ראשונית.

  • בדיקת טוקניזציית מידי

    בחינת האופן שבו מודל שפה מבוסס רשתות חוזרות מייצג תווים וזמנים בטקסט.

איפה זה נופל

ההדגמה הנוכחית מושבתת לחלוטין בגלל שגיאת ריצה, כך שאי אפשר להפיק ממנה צליל בדפדפן בלי לפתור את התקלה בקוד. בנוסף, חריגה מעבר ל־4096 טוקנים מותחת את המודל מעבר להקשר שאליו אומן, מה שמוביל לטעויות מוזיקליות ולתוצאות ירודות. הכלי גם לא מקבל קובצי מידי משלכם כדי להמשיך אותם, אלא נשען רק על הגרעין המובנה.

שאלות
נפוצות

האם השימוש באפליקציה כרוך בתשלום?

הגישה לממשק באתר חופשית לחלוטין ואינה דורשת תשלום או הרשמה. עם זאת, נכון לעכשיו מופיעה שגיאת ריצה שמונעת יצירת קטעים חדשים. כדי להשתמש במודל תצטרכו להמתין לתיקון או להוריד את המשקולות ולהריץ אותן עצמאית.

במה הממשק הזה שונה מהמודל המקורי?

המודל המקורי פולט רק נתוני מידי גולמיים וטוקנים שצריך לפענח בכלים חיצוניים. הממשק עוטף אותו בממיר שמייצר גם קובץ שמע ישיר להאזנה בדפדפן. בנוסף, הוא מספק מתגים פשוטים לבחירת כלי נגינה ואורך הקטע בלי לכתוב שורת קוד.

האם אפשר להריץ את הכלי על המחשב האישי?

כן, הקוד מסתמך על מודל פתוח ששוקל כ־560 מיליון פרמטרים וזמין להורדה חופשית. תצטרכו להתקין סביבת פייתון עם חבילות כמו fluid-synth וספריית המוזיקה של הפרויקט. מכיוון שמדובר במודל קטן יחסית, הוא מסוגל לרוץ גם על מחשבים ללא חומרה מקצועית.

האם הקבצים והיצירות שלי נשמרים אצלם?

הכלי אינו כולל אפשרות להעלאת קבצים פרטיים מהמחשב שלכם, כך שאין סכנה לדליפת חומרים אישיים. היצירות מופקות מתוך המערכת עצמה, אך שימו לב שאם תבחרו לשתף אותן דרך כפתור השיתוף, הן יוגדרו כנחלת הכלל. אם אתם רוצים לשמור על זכויות, פשוט הורידו את קובץ המידי בלי לשתף.

איך משתמשים

לוחצים על כפתור הסינתזה וממתינים. אם רוצים להמשיך את הקטע שנוצר, מופיע כפתור ייעודי שמאפשר לייצר המשך ישיר לאותו רצף צלילים.

בפועל, כרגע אי אפשר להריץ את ההדגמה ברשת כי היא תקועה במצב של שגיאת ריצה. מעבר לזה, השרת מוגדר על מעבד בסיסי בלבד, כך שגם כשהקוד יתוקן, העיבוד והמרת השמע צפויים להיות אטיים בהשוואה להרצה על מעבד גרפי.

הרישיון

הרישיון מוגדר כ־other ללא פירוט תנאים מסחריים ברורים. בעמוד מצוין שאתם אחראים על השימוש שלכם, ושיתוף של קטעי השמע דרך הממשק מקדיש אותם ישירות לנחלת הכלל.

הרישיון המלא ב־Hugging Face ↗