FACTS-Leaderboard

מה זה

הדף מציג טבלת דירוג מוכנה מראש של מודלים פתוחים שנבדקו על מבחן FACTS Grounding. אתם לא מזינים טקסט משלכם ולא מריצים מודלים חיים, אלא מקבלים גישה ישירה לתוצאות השוואתיות של מודלים כמו Llama-3.3-70B-Instruct, Gemma-3-27b-it, DeepSeek-R1-Distill-Qwen-14B ו־Qwen3-30B-A3B.

הבדיקה מתמקדת ספציפית ב־236 דוגמאות מהתחום הרפואי מתוך מאגר נתונים ציבורי של 860 דוגמאות מבית DeepMind. המטרה היא לבדוק באיזו מידה מודלים פתוחים בגדלים שונים מסוגלים להישען על עובדות ולא להמציא מידע רפואי שגוי.

מתאים ל

• בחירת מודל לטקסט רפואי

  בדיקה מהירה איזה מודל קוד פתוח מוביל בעיגון עובדות מתוך 236 המקרים שנבדקו.

• סינון מודלים לפי גודל

  השוואת ביצועים בין מודלים בינוניים של 14B לבין מודלים של 70B לפי משאבי המחשוב שלכם.

• השוואת ארכיטקטורות קוד פתוח

  בחינת ההבדלים בין משפחות מודלים כמו Llama, Gemma, DeepSeek ו־Qwen במשימות דיוק עובדתי.

איפה זה נופל

זהו לוח תוצאות סטטי בלבד ולא סביבת עבודה. אי אפשר להעלות קבצים, לבדוק טקסט רפואי משלכם או לבחון מודל שלא נמצא מראש ברשימה. בנוסף, המבחן מבוסס על תת-קבוצה קטנה של 236 דוגמאות רפואיות באנגלית מתוך המאגר המקורי, כך שהציונים אינם מעידים על ביצועי המודלים בעברית או במשימות שאינן כוללות עיגון עובדות רפואיות.

איך משתמשים

אין צורך בהתחברות או בהמתנה בתור. נכנסים לעמוד ולוח תוצאות נטען מיד, כי הוא רץ על שרת בסיסי ורק מציג נתונים קיימים. בממשק אפשר לסנן את הטבלה לפי גודל מודל, לבחור ארכיטקטורה, למיין לפי עמודות שונות או לחפש מודל ספציפי בתיבת החיפוש. יש גם לשונית הסבר שמפרטת על המדדים ומקור המידע.

הרישיון

הקוד והדף מפורסמים תחת רישיון apache-2.0 שמאפשר שימוש חופשי, שינוי והפצה, כולל לצרכים מסחריים. מאגר הנתונים עצמו מגיע מ־Kaggle ואין כאן העלאת תוכן אישי, כך שאין חשש לזכויות על קבצים שלכם.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗