MetaVoice-1B-v0.1
רץ בדפדפןmrfakenameרישיון לא דווח2024-02-06
העמוד מציג הדגמה למודל הדיבור MetaVoice 1B שהופך טקסט לקול. הוא מיועד למי שרוצה לבדוק את יכולות יצירת הדיבור של המודל ישירות מהדפדפן.
- —הורדות בחודש
- 144לייקים
מה זה
מדובר בממשק בדיקה שמריץ ברקע שרת פייתון מקומי עם המודל metavoiceio/metavoice-1B-v0.1. המודל פותח על ידי חברת MetaVoice כדי לייצר דיבור מבוסס טקסט, כשהארכיטקטורה שלו נשענת על מודל שפה של מיליארד פרמטרים. בקוד האפליקציה רואים קריאה ישירה לקובץ serving.py שטוען את המשקלים היישר ממאגר הנתונים המקורי.
בפועל אתם מזינים טקסט באנגלית ומקבלים קובץ שמע שמנסה להישמע טבעי ואנושי. המערכת נבנתה כקונטיינר דוקר עצמאי כדי לטעון את כל התלויות הנדרשות לפעולת המודל והשרת, בלי להסתמך על תבניות פשוטות יותר של הממשק. אין בקוד דוגמאות מובנות מראש, כך שכל בדיקה מתחילה מהזנת טקסט עצמאית לחלוטין לתוך שורת הפקודה שרצה מאחורי הקלעים.
מתאים ל
- בדיקת איכות הקול
האזנה לרמת הטבעיות של מודל מיליארד הפרמטרים באנגלית מול מודלים מתחרים.
- הערכת מהירות הפקה
מדידת זמני התגובה של שרת הדיבור כשהוא רץ על גבי חומרת t4 סטנדרטית.
- בחינת שרת התשתית
למידה מאופן הפעלת סקריפט השרת fam/llm/serving.py בתוך סביבת דוקר.
איפה זה נופל
הבעיה המיידית והגדולה ביותר היא שהאפליקציה פשוט לא עובדת וקורסת בשלב ההרצה, כך שאי אפשר להפיק ממנה שום צליל כרגע. מעבר לזה, המודל עצמו מכוון לאנגלית בלבד, ואין לו תמיכה אמיתית בהגייה של עברית או שפות אחרות בעלות מבנה מורכב.
כרטיס ה־t4-small הוא חומרה חלשה יחסית למודל שפה של מיליארד פרמטרים שמייצר אודיו, ולכן גם אם הדוקר היה תקין, קטעי שמע ארוכים היו נתקלים בצווארי בקבוק. לא כדאי להסתמך על ההדגמה הזו כמדד יציב לבחינת איכות הקול המקורית של המודל בסביבת ייצור.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה כרגע?
לא, האפליקציה מדווחת כרגע על שגיאת בנייה בשרת הדוקר. עד שהיוצר mrfakename לא יעדכן את הקוד, אי אפשר לפתוח את הממשק או להקליט אודיו דרך הדפדפן.
האם המודל תומך ביצירת דיבור בעברית?
לא, המודל אומן והוגדר לעבודה באנגלית בלבד. אם תזינו טקסט בעברית, המערכת תתעלם ממנו, תשבש את ההגיות או תיכשל לחלוטין בניסיון לחלץ פונמות מוכרות.
במה ההדגמה הזו שונה מהמודל המקורי?
ההדגמה מריצה עטיפת שרת ספציפית על חומרה מוגבלת מסוג t4-small. המודל המקורי עצמו הוא פרויקט של חברת MetaVoice שניתן להוריד ולהריץ עצמאית על מחשב חזק יותר ללא התקלות של המרחב הנוכחי.
האם זה עולה כסף או דורש הרשמה?
השימוש במרחב הוא חינמי לחלוטין ואינו דורש תשלום. עם זאת, בגלל התקלה הנוכחית בבנייה, אין שום שירות זמין לקבל תמורתו ערך.
איך משתמשים
כרגע אתם לא יכולים להשתמש בכלי הזה בדפדפן, כי האפליקציה תקועה במצב של שגיאת בנייה. במצב תקין היא מוגדרת לרוץ על מעבד גרפי מסוג t4-small, שמספק כוח עיבוד בסיסי וסביר למודלים בגודל של מיליארד פרמטרים.
אם היוצר יתקן את הגדרות הדוקר והעמוד יעלה, לא תצטרכו להירשם או לשלם כדי להקליד טקסט ולהמתין להפקה. זמני ההמתנה על חומרה כזו נעים סביב כמה שניות עד חצי דקה לכל קטע קול, בהתאם לאורך הטקסט ולעומס הכללי על השרת.
הרישיון
הרישיון של המרחב לא דווח כלל על ידי היוצר. במצב כזה אין אישור מפורש לשימוש מסחרי בקוד ההדגמה, ויש לבדוק בנפרד את תנאי הרישיון של המודל המקורי metavoiceio/metavoice-1B-v0.1 כדי לדעת אם מותר להשתמש בפלט שנוצר.