חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
B

bark — הדגמה

קוד פתוח

sunomit2023-04-14

  • gradio

suno עומדים גם מאחורי Suno AI, ויש עליו סקירה כאן.

מקלידים טקסט, בוחרים שפה או קול ומקבלים קובץ שמע ישירות בדפדפן. הכלי מתאים למי שרוצה לבדוק דיבור מלאכותי בלי להתקין ספריות פייתון או להחזיק כרטיס מסך חזק בבית.

  • 20.7 GBמשקל הקבצים
  • —הורדות בחודש
  • 2,379לייקים

מה זה

מזינים טקסט לתוך תיבת קלט, בוחרים הגדרה מתוך תפריט אפשרויות ולוחצים על כפתור ההפקה. בצד השני מופיע נגן שמע עם התוצאה להאזנה והורדה. הממשק כולל גם דוגמאות מובנות שאפשר לטעון ישירות כדי לראות איך זה עובד בלי להמציא משפטים מראש.

מאחורי הקלעים רץ המודל המקורי של bark, שטוען מראש משקלים דרך ספריית פייתון ייעודית. הקוד מייבא רשימת שפות נתמכות, קצב דגימה קבוע מראש ומייצר את גלי הקול בעזרת חישובי מערכים של numpy ועיבוד בתוך pytorch.

מתאים ל

  • בדיקת איכות דיבור

    האזנה לאיך נשמע טקסט חופשי בלי צורך להוריד מודל כבד למחשב האישי.

  • הפקת דגימות שמע קצרות

    יצירת קטעי קול מהירים לבדיקת רעיונות לפרויקטים אישיים ולא מסחריים.

  • השוואת שפות נתמכות

    מעבר בין השפות בתפריט ובדיקה אם המבטא והאינטונציה עונים על הדרישות שלכם.

איפה זה נופל

ההדגמה מציגה תיבת טקסט פשוטה ותפריט קבוע, בלי גישה לפרמטרים המתקדמים של יצירת גלי הקול או שליטה עדינה בניואנסים. המודל שרץ מאחור כבד, ואם השרת חווה עומס ייתכנו זמני המתנה ארוכים עד לקבלת התוצאה. הטקסטים שמוזנים כאן צריכים להיבדק מראש, שכן תמיכה בשפות שאינן ברשימת השפות המוגדרת עלולה להניב קול מעוות או פלט שגוי לחלוטין.

שאלות
נפוצות

האם השימוש בעמוד עולה כסף?

לא, הגישה לממשק פתוחה בחינם בדפדפן ואין דרישה לתשלום. ההרצה מתבצעת על גבי משאבי חומרה ציבוריים שמוקצים ישירות בעמוד. עם זאת, השימוש מוגבל למטרות לא מסחריות בלבד לפי תנאי הרישיון.

במה הממשק הזה שונה מהרצת המודל עצמו בקוד?

כאן מקבלים ממשק גרפי מוכן עם אפשרויות בחירה בסיסיות, בלי צורך לכתוב קוד פייתון או לנהל ספריות. מצד שני, הרצה עצמאית בקוד נותנת שליטה מלאה על כל הפרמטרים הפנימיים של המודל, בעוד שהעמוד מגביל אתכם למה שהוגדר בטופס.

כמה זמן לוקח לייצר קטע קול?

העיבוד מתבצע בעזרת מאיץ ייעודי ומסתיים לרוב תוך שניות ספורות עד דקה לקטע קצר. אם יש משתמשים נוספים שמריצים בקשות באותו רגע, ייתכן שתמתינו בתור עד שהחומרה תתפנה לטפל בטקסט שלכם.

האם אפשר להריץ את זה מקומית על המחשב?

כן, המודל והקוד פתוחים לשימוש עצמאי וניתנים להורדה. כדי לעשות את זה תצטרכו סביבת פייתון מסודרת וכרטיס מסך שתומך בעומסי החישוב של המודל, אחרת תהליך הפקת השמע יהיה אטי מאוד.

איך מריצים

נכנסים לעמוד, כותבים את הטקסט בתיבה, בוחרים אפשרות מהתפריט ולוחצים על כפתור Generate Audio. אין צורך בהתחברות או בהזנת כרטיס אשראי כדי להתחיל.

העיבוד רץ על גבי חומרת zero-a10g שמקצה משאבי עיבוד לפי דרישה. יצירת האודיו לוקחת בדרך כלל כמה שניות או דקות בודדות, תלוי בעומס על השרת ובאורך הטקסט שהזנתם.

pip install -U huggingface_hub
hf download suno/bark

הקבצים

799 קבצים במאגר, 20.7 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הפרויקט מפורסם תחת רישיון cc-by-nc-4.0. המשמעות היא שמותר לבדוק, לשמוע ולהשתמש בכלי למטרות אישיות ומחקריות בלבד, ואסור להשתמש בתוצאות השמע או בהרצה הזו לצרכים מסחריים מניבי רווח.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא בעמוד המודל ↗