GPT
L

leaderboards

רץ בדפדפן

autoevaluateapache-2.02022-04-22

  • streamlit

לוח תוצאות שמרכז ציונים והערכות של מודלים מתוך מאגר הנתונים של האגב. הוא מיועד למי שמחפש להשוות ביצועים של מודלים לפי מדדים ומערכי נתונים.

  • הורדות בחודש
  • 134לייקים

מה זה

הכלי מציג נתוני הערכה של מודלים שונים בתוך טבלאות אינטראקטיביות שנבנו עם ספריות פנדס ו־AgGrid. אתם לא מעלים לכאן קבצים כבדים להרצה, אלא מקבלים נתונים שנמשכו ישירות מהמטא-דאטה וכרטיסי המודלים ברשת של האגב.

בקוד רואים שהמידע מסונן לפי שדות כמו שם המודל, מערך הנתונים, החלוקה שלו ומדדי הביצוע שנבחרו. הטבלה מרכזת את הציונים ומאפשרת לסנן רק מודלים מאומתים, כדי לבדוק איך כל מודל מתפקד במשימה מוגדרת מול מתחרים באותו תחום.

מתאים ל

  • השוואת ביצועי מודלים

    בדיקת ציונים של מודלים שונים על אותו מערך נתונים לפני שבוחרים מה להוריד.

  • סינון מודלים מאומתים

    צפייה רק בתוצאות של מודלים שעברו אימות רשמי כדי להימנע מהטיות בדיווח.

  • בחינת מדדי הערכה

    מעקב אחרי מדדים שונים שמוגדרים בקוד עבור סוגי משימות ספציפיים.

איפה זה נופל

הבעיה המרכזית היא שהיישום נמצא כרגע במצב קריסה ולא מציג דבר. מעבר לזה, הוא לא מריץ בדיקות בעצמו אלא רק מציג תוצאות קיימות שנאספו מכרטיסי המודלים, כך שאין כאן אפשרות לבחון מודל פרטי משלכם בזמן אמת.

שאלות
נפוצות

האם השימוש בכלי עולה כסף?

הגישה חופשית לחלוטין דרך הדפדפן. אין כאן מודל תשלום או דרישה לחשבון בתשלום. כל המידע המוצג פתוח לקהל הרחב.

למה מופיעה שגיאה כשאני פותח את העמוד?

השרת מדווח על שגיאת הרצה בקוד של האפליקציה. זה אומר שהיא פשוט לא פעילה כרגע עד שהמפתח יתקן אותה. אין מה לעשות חוץ מלחכות לעדכון או להריץ את הקוד לבד.

האם אפשר להריץ את הטבלאות מקומית?

כן, הקוד כתוב בפייתון ומשתמש בספריית סטרמליט הפתוחה. אפשר להוריד את הקבצים ולהפעיל אותם במחשב שלכם, אך תצטרכו לתקן את השגיאה שגורמת לקריסה הנוכחית.

האם המערכת בודקת את המודל שלי בפועל?

לא, אין כאן מנוע שמריץ מודלים או מקבל קלטים חדשים. מדובר בלוח שמרכז מטא-דאטה ותוצאות שכבר דווחו בעבר על ידי מפתחים אחרים.

איך משתמשים

נכנסים לעמוד דרך הדפדפן ומשתמשים בפילטרים כדי לבחור מערך נתונים או משימה. הממשק רץ על חומרת מעבד בסיסית, אבל כרגע הוא בכלל מדווח על שגיאת זמן ריצה ולא נטען כמו שצריך. במצב תקין אין צורך בהתחברות או בהמתנה בתור ארוך, כי מדובר רק בטעינת טבלאות נתונים.

הרישיון

הקוד מפורסם תחת רישיון אפאצ'י 2.0, שמאפשר שימוש חופשי, שינוי והפצה גם לצרכים מסחריים. מאחר שלא מעלים לכאן קבצים אישיים, אין סכנה לחשיפת מידע פרטי שלכם.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗