חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
S

SonicMaster

רץ בדפדפן

amaai-labapache-2.02025-08-03

  • gradio

מעלים קובץ שמע, כותבים הוראה טקסטואלית קצרה ומקבלים קובץ שעבר שחזור או מאסטרינג. הכלי מתאים למוזיקאים ואנשי סאונד שרוצים לנקות הקלטות בלי שרשרת פלאגינים ידנית.

  • —הורדות בחודש
  • 38לייקים

מה זה

אתם מעלים קטע אודיו או בוחרים מתוך עשר דוגמאות מובנות, ומקלידים בתיבת הטקסט מה אתם רוצים לתקן. ההוראות יכולות להיות פשוטות וישירות כמו הפחתת הדהוד, ניקוי עיוותים ודיסטורשן, או חידוד ושיפור הבהירות הכללית של ההקלטה. בתום העיבוד מקבלים נגן עם קובץ השמע המשופר ותיבת סטטוס שמציגה הודעות מערכת.

מאחורי הממשק רץ המודל SonicMaster של מעבדת amaai-lab, שמבוסס על מאמר מחקרי בתחום שחזור ומאסטרינג של מוזיקה באמצעות הנחיית טקסט. המערכת מחברת בין הבנת השפה הטבעית לבין עיבוד אותות מוזיקלי, כך שהיא מנסה לתרגם תיאור מילולי לשינויים אקוסטיים מדויקים בתדרים, בדינמיקה ובמרחב של הקטע שהזנתם.

הקוד עצמו בודק ומוריד את משקלי המודל ישירות מהמאגר של huggingface בזמן הפעולה. בדף מופיעות גם עשר דוגמאות מוכנות של קלט יחד עם טקסט מתאים, אם כי לפי הקוד הן נטענות במלואן רק אחרי שהקבצים הנדרשים נמשכו לשרת בהפעלה הראשונית.

מתאים ל

  • ניקוי דיסטורשן מהקלטה

    מעלים קטע שמע עם צרימות או עיוותי עוצמה, ומבקשים מהמודל לנקות את הלכלוך בעזרת פרומפט ממוקד.

  • הפחתת הדהוד מיותר

    מזינים קובץ שהוקלט בחלל בעייתי ומבקשים להוריד את רמת הריוורב כדי לייבש את הסאונד ולקרב את המקור.

  • שיפור בהירות של מיקס

    מבקשים הבהרה כללית לקטע מוזיקלי שלם שנשמע עמום, לקבלת תוצאה פתוחה ומאוזנת יותר בתדרים הגבוהים.

איפה זה נופל

הכלי מבין הוראות באנגלית בלבד ומסתמך על תיאורים ישירים, כך שניסוחים מעורפלים עלולים לתת תוצאה שלא תואמת את הציפיות שלכם. חומרת zero-a10g נוטה לכבות מופעים שלא נמצאים בשימוש, מה שיכול לייצר השהיה מעצבנת בהתחלה בזמן שהשרת מוריד את הקבצים הכבדים מחדש. בנוסף, אל תצפו מזה להחליף עבודת מאסטרינג מקצועית באולפן על קטעים מורכבים.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

לא, הגישה לממשק פתוחה בחינם לחלוטין בדפדפן. אין צורך להזין אמצעי תשלום ואין מגבלה רשמית שמונעת מכם לבדוק כמה קבצים ברצף. כל עוד השרת באוויר, אפשר לעבוד איתו בחופשיות.

כמה זמן לוקח לקבל את האודיו המוכן?

העיבוד עצמו רץ על מעבד גרפי A10G ולכן אמור לקחת שניות בודדות לקטע קצר. עם זאת, אם השרת התעורר משינה בדיוק כשנכנסתם, תצטרכו לחכות דקה או שתיים להורדת המשקולות הראשונית. תיבת הסטטוס תציג לכם מה קורה ברקע.

האם אפשר להריץ את הכלי על המחשב שלי?

כן, הקוד והמשקלים זמינים להורדה תחת רישיון פתוח. תצטרכו סביבת פייתון מתאימה, כרטיס מסך שמסוגל להחזיק את המודל, ואת התלויות שנמצאות במאגר. לרוב המשתמשים יהיה פשוט יותר לבדוק אותו ישירות בדפדפן.

מה ההבדל בין האפליקציה הזאת למודל המקורי?

האפליקציה היא פשוט ממשק גרפי שנבנה באמצעות gradio ומריץ את המודל SonicMaster שפותח במחקר. במקום להתעסק עם שורת פקודה, סקריפטים וטעינת משקלים ידנית, אתם מקבלים כפתורים פשוטים ודוגמאות מוכנות לשימוש מיידי.

איך משתמשים

גוררים קובץ שמע לתיבת הקלט, כותבים את ההנחיה המבוקשת באנגלית ולוחצים על Enhance. אין צורך להירשם או לחבר חשבון כדי להתחיל. השרת פועל על חומרת zero-a10g, מה שאומר שהוא מחזיק מאיץ גרפי חזק של אנבידיה, אבל אם הוא היה רדום תצטרכו להמתין להורדת המשקולות והרצת הקוד הראשונית.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי בקוד ובמודל גם לצרכים מסחריים ופרטיים. לגבי קובצי השמע שאתם מעלים, הם רצים על גבי תשתית הענן שבה מופעל ה־Space.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗