DABstep — הדגמה
רץ בדפדפןadyencc-by-4.02024-12-23
זו הדגמה שמריצה את הדאטהסט DABstep.
לוח תוצאות שמרכז ציונים של סוכני בינה מלאכותית במבחן ההסקה של Adyen, ומיועד לחוקרים שרוצים להשוות ביצועים או להגיש תוצאות משלהם.
- —הורדות בחודש
- 105לייקים
מה זה
בעמוד תמצאו טבלאות דירוג שמציגות את הציונים של מודלים וסוכנים שונים על גבי מאגר הנתונים DABstep. הממשק מחולק לשתי לשוניות מרכזיות, תוצאות מאומתות ותוצאות שטרם עברו אימות, וכולל אפשרות להוריד את הנתונים ישירות כקובץ דרך כפתור ייעודי.
מי שרוצה לבדוק את הסוכן שלו לא מריץ כאן חישובים בזמן אמת, אלא מגיש קובץ תשובות מוכן. הטופס דורש שם סוכן, משפחת המודל, ארגון, כתובת מייל, קישור למאגר הקוד של הסוכן ודוגמה להנחיית המערכת ששימשה להרצה.
מתאים ל
- השוואת סוכני בינה מלאכותית
מעקב אחר הציונים של משפחות מודלים וסוכנים שונים במבחן ההסקה הספציפי של DABstep.
- הגשת תוצאות מחקר
העלאת קובץ תשובות של סוכן שפיתחתם כדי להציג את הביצועים שלו ברשימה הציבורית.
- ייצוא נתוני ביצועים
הורדת טבלאות הציונים המאומתות כקובץ לניתוח עצמאי במחשב.
איפה זה נופל
זהו לוח תוצאות בלבד, ולא כלי שמריץ את המודלים או בודק את הקוד שלהם בפועל. אתם חייבים להריץ את מבחן ההסקה מראש בסביבה שלכם ולהעלות רק את הפלטים. כמו כן, הטבלה כוללת לשונית של תוצאות לא מאומתות, כך שכל עוד הגשה לא נבדקה לפי הנחיות האימות, אי אפשר להסתמך על המספרים בעיניים עצומות.
שאלות
נפוצות
האם הכלי הזה מריץ את המודל שלי?
לא, הוא לא מריץ מודלים ולא מייצר תשובות. אתם צריכים להריץ את המבחן עצמאית ולהעלות לכאן רק את קובץ התוצאות הסופי. העמוד משמש אך ורק כלוח תוצאות ורישום.
האם השימוש בעמוד עולה כסף?
השימוש בלוח התוצאות ובממשק ההגשה פתוח לגמרי בחינם. אתם צריכים רק חשבון Hugging Face רגיל כדי להתחבר ולשלוח נתונים. אין כאן מדרגות תשלום או עלויות נסתרות.
האם אפשר להריץ את לוח התוצאות מקומית?
כן, הקוד מבוסס gradio ואפשר להריץ את הקובץ app.py אצלכם במחשב. בשביל זה צריך להגדיר משתנה סביבה בשם HF_TOKEN ולהתקין את התלויות הנדרשות. זה שימושי בעיקר למי שרוצה לשנות את הממשק או לבחון אותו מקומית.
מה ההבדל בין הלשוניות המאומתות ללא מאומתות?
הלשונית המאומתת מציגה רק תוצאות שנבדקו ואושרו לפי הנחיות האימות של הפרויקט. בלשונית הלא מאומתת מופיעות הגשות חדשות לפני שעברו בדיקה מעמיקה. כדאי להסתמך בעיקר על הטבלה המאומתת כשעושים השוואות רציניות.
איך משתמשים
הטבלאות נטענות מיד בכניסה לעמוד ואפשר לעבור בין התוצאות המאומתות ללא מאומתות או לרענן אותן בלחיצת כפתור. כדי להגיש תוצאות חדשות צריך להתחבר עם חשבון Hugging Face דרך כפתור ההתחברות, למלא את כל פרטי הסוכן, להעלות את קובץ התשובות וללחוץ על כפתור ההגשה. השרת רץ על חומרת מעבד משודרגת, ואין כאן זמן המתנה ארוך כי הפעולה העיקרית היא הצגת נתונים וקליטת קבצים.
הרישיון
הפרויקט מפורסם תחת רישיון cc-by-4.0 שמתיר שימוש, שיתוף והתאמה של המידע, כולל למטרות מסחריות, כל עוד נותנים קרדיט מתאים. שימו לב שהפרטים שאתם שולחים בטופס ההגשה עשויים להפוך לציבוריים בטבלאות.
- שימוש מסחרי
- שינוי הקוד
- חובת ייחוס