GPT
O

open_asr_leaderboard

רץ בדפדפן

hf-audioרישיון לא דווח2023-09-07

  • gradio
  • leaderboard

לוח תוצאות להשוואת ביצועי מודלי תמלול דיבור לפי דיוק, מהירות וגודל. מיועד למי שבוחר מודל זיהוי קולי ורוצה נתוני אמת במקום הבטחות שיווקיות.

  • הורדות בחודש
  • 1,453לייקים

מה זה

אין כאן תיבת העלאה להקלטות ואי אפשר לתמלל קובץ במקום. אתם מזינים סינונים, בוחרים שפות, ומשווים בין מודלים שונים כמו lite-whisper, niagara, higgs-audio או data2vec על גבי מאגרי מידע מוכרים כמו AMI, VoxPopuli ו־Earnings22.

הממשק פולט טבלאות דירוג וגרפי פראטו אינטראקטיביים של Plotly. התוצאות מציגות אחוזי שגיאות מילים מול מהירות עיבוד בזמן אמת, גודל מודל במיליארדי פרמטרים, שיעורי העתקת איות ורמת התאמה לשגיאות במקור.

הלשוניות השונות מציגות חלוקה להערכה רב-לשונית, תמלול של קטעי אודיו ארוכים, ונתונים על סטים פנימיים. הכל מתבסס על נתוני בנצ'מרק שנמדדו מראש ולא על ריצה חיה של המודלים באותו רגע.

מתאים ל

  • בחירת ארכיטקטורת תמלול

    השוואת שיעור שגיאות מול מהירות כדי לבחור מודל שמתאים לתקציב השרתים שלכם.

  • בדיקת תמלול ארוך

    מעבר ללשונית Long-form לבחינת יציבות מודלים על הקלטות ממושכות ללא קיטוע.

  • איתור מודל רב-לשוני

    סינון שפות שונות כדי לראות מי מהמודלים שומר על רמת דיוק אחידה בכולן.

איפה זה נופל

הטעות הנפוצה היא לחשוב שמדובר בכלי תמלול. אתם לא יכולים לבדוק כאן הקלטה משלכם, רעשי רקע ספציפיים או מבטא שלא מופיע במאגרים המובנים. בנוסף, מודל שמצטיין בדאטהסט מסוים כמו שיחות עסקיות של Earnings22 לא בהכרח יתפקד טוב בשיחה יומיומית, והגרפים כוללים רק מודלים שדיווחו כמות פרמטרים או נבדקו על כל השפות שסימנתם.

שאלות
נפוצות

האם אפשר לתמלל כאן קובץ אודיו שלי?

לא. הממשק הוא לוח תוצאות בלבד שמציג נתונים שנמדדו מראש על מאגרי בדיקה קבועים. אם תרצו לתמלל, תצטרכו להוריד ולהריץ את המודלים עצמם בנפרד.

האם השימוש בעמוד עולה כסף?

העמוד פתוח לשימוש חופשי וחינמי ישירות בדפדפן. אין צורך בהתחברות, יצירת משתמש או הזנת פרטי אשראי כדי לחקור את הנתונים.

במה הממשק שונה משימוש ישיר במודל כמו Whisper?

המודל עצמו הוא קוד שלוקח שמע והופך אותו לטקסט. האפליקציה הזו רק משווה אותו למודלים מתחרים על בסיס אותם מבחנים כדי שתוכלו לדעת מי מהם מהיר ומדויק יותר.

כמה זמן לוקח לנתונים להתעדכן כשמשנים סינון?

התגובה כמעט מיידית. מאחר שמדובר בסינון טבלאות מוכנות וציור מחדש של גרפי נתונים ולא בהרצת מודלי שמע כבדים, הדפדפן מתעדכן תוך שניות בודדות.

איך משתמשים

נכנסים לעמוד דרך הדפדפן וכל המידע כבר מוצג, בלי הרשמה ובלי תור. מסמנים צ'קבוקסים כדי לסנן שפות, עמודות או מודלים קנייניים, ומשחקים עם סליידרים כדי לכוונן את הטווח בגרפים. העיבוד היחיד שמתרחש הוא מיוון טבלאות וציור מחדש של הגרפים על גבי מעבד cpu-upgrade, כך שהתגובה מיידית ולא תלויה במשאבי חישוב כבדים.

הרישיון

הרישיון של האפליקציה לא דווח במאגר. בפועל אתם לא מעלים אליה קבצים אישיים ולא מייצרים בה תוכן חדש, כך שאין חשש לזכויות יוצרים על חומרים שלכם, אך מומלץ לבדוק את הרישיון הנפרד של כל מודל שמופיע בטבלה לפני שימוש מסחרי.

הרישיון המלא ב־Hugging Face ↗