חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
V

Vocal-Isolator

רץ בדפדפן

Smottoopenrail2023-08-11

  • streamlit

הכלי מפריד ומסיר שירה מקבצי אודיו ישירות בדפדפן. הוא מיועד למי שרוצה ליצור פלייבק מהיר משיר קיים בלי להתקין תוכנות עריכה כבדות במחשב.

  • —הורדות בחודש
  • 37לייקים

מה זה

אתם מעלים קובץ שמע באחד הפורמטים הנתמכים, שכוללים WAV, MP3, OGG או FLAC. המערכת מעבדת את האודיו ומחזירה נגן שמאפשר להאזין לקובץ המקורי מול התוצאה המעובדת, יחד עם אפשרות להוריד את הגרסה ללא השירה כקובץ WAV למחשב.

מאחורי הקלעים רץ מודל למידה עמוקה שמבוסס על ארכיטקטורת MDX-Net, ספציפית מימוש של KimVocal ורשת Conv_TDF_net_trimm בפורמט ONNX. המודל מתמחה בהפרדת מקורות מוזיקליים ומנתח את האות כדי לנקות את ערוץ השירה מתוך המיקס, כשהעיבוד נשען על ספריות פייתון סטנדרטיות לאודיו כמו Librosa ו־Soundfile.

מתאים ל

  • הכנת פלייבק לקריוקי

    מסירים את קול הזמר מקובץ קיים כדי לקבל רצועת ליווי מוזיקלית נקייה להופעה או למסיבה.

  • יצירת רמיקסים ודגימות

    מנקים שירה מתוך קטעים ישנים כדי להשתמש בבסים ובתופים כבסיס להפקה חדשה.

  • תרגול שירה ואימונים

    מורידים את קול המבצע המקורי כדי שתוכלו להקליט את עצמכם שרים על גבי הכלים המקוריים.

איפה זה נופל

למרות השם, הכלי כרגע רק מנקה את השירה ומשאיר פלייבק, ולא מייצר ערוץ מבודד של הקול בלבד להורדה. בנוסף, הרצה על מעבד מרכזי פשוט גורמת לעיבוד איטי, ואם תעלו קבצים כבדים מאוד הממשק עלול לקרוס בלי לתת התראה מסודרת. לא כדאי לבנות עליו להפקות שדורשות הפרדה אקוסטית מושלמת ללא זליגות סאונד.

שאלות
נפוצות

האם השימוש בעמוד כרוך בתשלום?

לא. האפליקציה פתוחה לשימוש חופשי בדפדפן ואין שום צורך להכניס אמצעי תשלום.

האם אפשר להריץ את הכלי על המחשב הפרטי?

כן. הקוד פתוח בגיטהאב, ואפשר לשכפל אותו, להתקין את הספריות מתוך הקובץ המצורף ולהריץ מקומית עם פקודת streamlit פשוטה.

כמה זמן לוקח לעבד שיר שלם?

השרת פועל על חומרת מעבד בסיסית בלבד ללא מאיץ גרפי. עיבוד של שיר ממוצע באורך כמה דקות ייקח זמן מה, ולא מתבצע באופן מיידי.

האם מקבלים קובץ נפרד של השירה בלבד?

לא. לפי הקוד והתיעוד הנוכחי, הכלי מיועד להסרת השירה מהשיר, והוא מפיק להורדה רק את ערוץ המוזיקה ללא הקולות.

איך משתמשים

גוררים את הקובץ לממשק של Streamlit ולוחצים על כפתור ההפעלה. יש מד התקדמות שמציג את מצב העיבוד בזמן אמת, ולא צריך לפתוח חשבון או להירשם כדי להתחיל. הביצועים בפועל תלויים בשרת, שרץ על מעבד בסיסי רגיל ללא האצת כרטיס מסך, כך ששירים ארוכים ידרשו המתנה מורגשת ביחס לעיבוד מקומי.

הרישיון

הפרויקט מוגדר ברישיון openrail בפרטי המאגר, בעוד הקוד עצמו בתיעוד מצהיר על רישיון Apache 2.0. הסתירה הזו דורשת זהירות אם אתם מתכננים שימוש מסחרי בקוד. לגבי קבצי האודיו שאתם מעלים, זכויות היוצרים על השירים נשארות שלכם או של בעלי היצירה המקוריים.

  • שימוש מסחרי
  • שינוי הקוד
  • מגבלות שימוש ברישיון

הרישיון המלא ב־Hugging Face ↗