חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
O

outsmart

רץ בדפדפן

ed-donnermit2024-07-24

  • streamlit
  • arena
  • benchmark
  • leaderboard

הזירה הזו מעמתת מודלי שפה זה מול זה במשחק של משא ומתן, בריתות ומזימות. היא מיועדת למי שרוצה לראות איך בינה מלאכותית מתמרנת שחקנים אחרים כדי לנצח.

  • —הורדות בחודש
  • 60לייקים

מה זה

במקום להזין טקסט רגיל, אתם מפעילים הדמיה שבה מודלים מתחרים על מטבעות. כל שחקן מתחיל עם 12 מטבעות, ובכל תור הוא שולח הודעות פרטיות לאחרים, מעביר מטבע לשחקן אחד ולוקח מאחר. אם שני שחקנים משתפים פעולה נגד שחקן שלישי, נוצרת ברית שמעניקה להם בונוס על חשבונו. המשחק מסתיים כשאחד פושט רגל או אחרי עשרה תורות, והמנצח הוא מי שצבר הכי הרבה.

מאחורי הקלעים רץ הקוד של הזירה ומפעיל קריאות למודלים כמו openai/gpt-oss-120b. הממשק מציג את לוח התוצאות, את הבריתות שנוצרות בזמן אמת, ואת תיעוד המחשבות הפנימי שמסביר למה כל שחקן בחר לבגוד או לשתף פעולה. בסרגל הצד אפשר לראות את דירוג המודלים מכלל המשחקים שנערכו.

מתאים ל

  • בחינת יכולות שכנוע

    צפייה באופן שבו מודלים שונים מנהלים משא ומתן סודי ומנסים לתאם מהלכים מול יריבים.

  • מעקב אחרי קבלת החלטות

    קריאת יומן המחשבות הפנימי כדי לראות את שרשרת השיקולים מאחורי ברית או בגידה במשחק.

  • השוואת מודלים מקומית

    שכפול הקוד למחשב האישי כדי להריץ קרבות בין מודלים בכירים באמצעות מפתחות API פרטיים.

איפה זה נופל

הגרסה הציבורית מוגבלת למודלים זולים יותר כדי לחסוך בעלויות ההרצה של המפתח, ולכן אי אפשר לבחון בה את מודלי הקצה החזקים ביותר ללא התקנה מקומית. אתם לא משחקים בעצמכם מול המודל אלא רק צופים בסימולציה אוטונומית. בנוסף, חוקי המשחק נוקשים ומבוססים על מהלכים מוגדרים מראש, כך שהיכולת הטקטית נמדדת רק בהקשר הצר של חלוקת המטבעות הזו.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

לא, הגישה בדפדפן חופשית לחלוטין וללא עלות. המפתח מריץ שם מודלים חסכוניים כדי לא לספוג עלויות גבוהות. אם תבחרו להריץ את הקוד אצלכם עם מפתחות של OpenAI, Anthropic או Google, תשלמו עליהם ישירות לספקים.

האם אפשר להעלות קבצים או לשחק בעצמי?

לא. האפליקציה אינה כלי עבודה לקבצים, ואין בה אפשרות להצטרף כשחקן אנושי. אתם צופים בהתמודדות אוטומטית לחלוטין בין מודלי שפה שמתקשרים זה עם זה.

האם אפשר להריץ את הפרויקט על המחשב שלי?

כן, הקוד זמין ב־GitHub וקל להתקין אותו. יוצרים סביבת conda עם פייתון 3.11, מתקינים את התלויות, מגדירים מפתחות API בקובץ סביבה ומפעילים את streamlit. בהרצה כזו אפשר לבחור בדיוק אילו מודלים יתחרו.

איך משתמשים

לוחצים על Run Turn כדי לראות מהלך בודד של המודלים, או על Run Game כדי להריץ את כל הסיבובים ברצף עד הסיום. אין צורך להתחבר או להזין מפתחות אישיים בגרסה המקוונת הזו. השרת רץ על תצורת cpu-upgrade, אבל קצב ההרצה תלוי בעיקר בזמן התגובה של ה־API של המודלים המשתתפים. אם רוצים לקרוא את השיקולים הטקטיים, פותחים את אזור ה־Inner Thoughts.

הרישיון

הפרויקט מופץ תחת רישיון MIT. מותר להוריד את הקוד, לשנות אותו ולהריץ אותו באופן חופשי, כולל לשימוש מסחרי. אין העלאת קבצים לאפליקציה, כך שאין כאן עניין של שמירת קבצים פרטיים בשרת.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗