TabArena/leaderboard
רץ בדפדפןTabArenaapache-2.02025-05-21
לוח תוצאות שמרכז דירוגי אלו למודלים של למידת מכונה על נתונים טבלאיים. הוא מיועד לחוקרים ולמפתחים שבוחרים מודל ורוצים לראות ביצועים השוואתיים.
- —הורדות בחודש
- 170לייקים
מה זה
לא מזינים כאן נתונים ולא מאמנים מודלים. העמוד מציג טבלאות דירוג שחושבו מראש ומבוססות על מחקר של TabArena, כולל השוואות זוגיות בשיטת אלו ומדד פער מהמודל המוביל. התוצאות מחולקות לשני מסלולים עיקריים, TabArena לבחינה סטנדרטית ו־BeyondArena למצבים מורכבים יותר.
אפשר לסנן את הטבלאות לפי קטגוריות מתחרים שונות: מודלים בודדים, פתרונות קוד פתוח מקומיים, מערכות שמשלבות מודלי שפה, או שירותים מסחריים שפועלים מאחורי ממשק רשת סגור. מכיוון שדירוג אלו תלוי במאגר המתחרים הספציפי, כל שילוב קטגוריות מציג חישוב נפרד ולא סינון שטחי של השורות.
מתאים ל
- בחירת מודל לטבלאות
בדיקת דירוג הביצועים היחסי בין מודלים מקומיים למודלים מסחריים לפני שמתחילים פרויקט.
- שליפת נתונים באוטומציה
הורדת קובצי הטבלאות ישירות בפקודת רשת כדי לנתח את המספרים בסקריפט עצמאי.
- חיבור לסוכני תוכנה
קריאה לנקודות הקצה של הממשק כדי לתת לסוכן גישה לדירוגי המודלים העדכניים.
איפה זה נופל
זהו לוח תצוגה בלבד ולא כלי אימון או הרצה. אתם לא יכולים להעלות קובץ נתונים משלכם כדי לבדוק איך מודל מסוים מתמודד איתו. בנוסף, המספרים נכונים למערכי הנתונים ולמשימות שנבדקו במחקר המקורי, והם לא מבטיחים ביצועים דומים על נתונים עסקיים אמיתיים בעברית או במבנה חריג.
שאלות
נפוצות
האם השימוש בעמוד עולה כסף?
לא. הצפייה בטבלאות והגישה לקבצים חופשיות לגמרי ואינן דורשות תשלום או מפתח גישה.
מה קורה עם הנתונים שאני מעלה?
שום דבר, כי אין בממשק אפשרות להעלות קבצים. העמוד רק מציג תוצאות שנמדדו במחקר.
אפשר להריץ את הלוח על המחשב שלי?
כן. הקוד זמין להורדה ומתקינים אותו באמצעות מנהל חבילות של פייתון ישירות מהמאגר.
במה זה שונה מהרצת המודלים עצמם?
כאן מוצגים רק הסיכומים הסטטיסטיים של הבדיקות. כדי לאמן או להריץ את המודלים על נתונים בפועל צריך לפנות לקוד המקורי של המחקר.
איך משתמשים
נכנסים לדפדפן והנתונים מוצגים מיד, בלי צורך בהרשמה או התחברות לחשבון. הממשק רץ על מעבד בסיסי אבל לא מבצע חישובים כבדים בזמן אמת, אלא קורא קובצי טקסט מוכנים. הטעינה והמעבר בין החיתוכים מהירים ואין תור להמתנה. מי שמעדיף יכול למשוך את קובצי הנתונים ישירות בפקודת רשת פשוטה, או לפנות לממשקי המידע המובנים שמחזירים תשובות במבנה נתונים מוגדר.
הרישיון
הפרויקט מפורסם תחת רישיון אפאצ'י שתיים אפס, שמתיר שימוש חופשי, שינוי והפצה, כולל לצרכים מסחריים. מאחר שלא מעלים לכאן קבצים, אין שמירה או שימוש במידע שלכם.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים