open_pl_llm_leaderboard

מה זה

בדף הזה לא מזינים טקסט חופשי כדי לקבל תשובה, אלא מעיינים בטבלה השוואתית מוכנה מראש. הממשק מציג ציונים עבור שורה של מודלים כמו גרסאות של APT3, סדרת internlm2, ודגמי zephyr או Starling-LM. אפשר לחפש דגם ספציפי בתיבת חיפוש ולסנן את התצוגה לפי דיוק המשקולות, גודל המודל, או כמות הדוגמאות שניתנו לו במבחן.

התוצאות בטבלה מבוססות על הרצות של חבילת ההערכה של EleutherAI מול מאגרי מידע ומבחנים שונים בפולנית, ביניהם klej על משימותיו השונות, belebele, ומבחני poleval. המערכת טוענת את קובצי התוצאות ומסדרת את הנתונים ישירות לתוך טבלה עם אפשרות להוריד את המידע הגולמי בקובצי CSV או JSON.

מתאים ל

• בחירת מודל לעיבוד פולנית

  בדיקת ביצועים השוואתית בין דגמי קוד פתוח כדי לדעת איזה ארכיטקטורה מתמודדת טוב יותר עם תחביר פולני.

• ייצוא נתוני הערכה

  הורדת קובצי CSV או JSON עם כל הציונים של המבחנים לשימוש במחקרים עצמאיים או בניתוח מקומי.

• סינון לפי גודל ודיוק

  איתור מודלים קטנים, למשל סביב 1.8B או 7B, שמתאימים למגבלות חומרה ומציגים תוצאה סבירה.

איפה זה נופל

זהו אינו כלי לשיחה או בדיקת פרומפטים, ואי אפשר להריץ בו מודל אינטראקטיבי. כל הנתונים ממוקדים בפולנית בלבד, כך שאין כאן שום אינדיקציה לגבי ביצועי המודלים בעברית או במשימות כלליות אחרות. בנוסף, אם תרצו להגיש מודל משלכם, אפשרות ההגשה בקוד מוערת בחלקה ודורשת מעקב נפרד אחרי תור ההרצה.

איך משתמשים

טעינת הדף מציגה מיד את טבלת ההשוואה המלאה בלי צורך בהרשמה או התחברות. הסינון והחיפוש מתבצעים מיידית בדפדפן, כיוון שמדובר בעיבוד נתונים קיים של פנדס שרץ על מעבד משודרג, ולא בהרצת מודל שפה כבד בזמן אמת. קיימת בקוד לשונית להגשת מודלים חדשים למבחן, אך בחלק מהמקרים היא מנוטרלת, כך שהשימוש המרכזי כאן הוא צפייה בלבד.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0 שמאפשר שימוש חופשי, העתקה והתאמה של הקוד. אין העלאה של תוכן פרטי או יצירה של טקסט חדש, כך שאין מגבלות זכויות יוצרים על קלטים מהמשתמש.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗