GenAI-Arena
רץ בדפדפןTIGER-Labmit2024-02-12
משווים מודלים פתוחים של תמונה ווידאו ראש בראש ומצביעים על התוצאה הטובה יותר. מתאים למי שרוצה לבדוק ביצועי מודלים שונים לפני שבוחרים אחד לפרויקט.
- —הורדות בחודש
- 296לייקים
מה זה
מזינים הנחיית טקסט או תמונה לעריכה ומקבלים פלט משני מודלים שונים במקביל כדי להשוות ביניהם. הממשק מחולק ליצירת תמונות, עריכת תמונות ויצירת וידאו, וכולל מצב עיוור שבו לא יודעים מי יצר מה עד שמצביעים, מצב השוואה גלוי, אזור התנסות ישיר ולוחות דירוג שמבוססים על מדד ELO.
מאחורי הקלעים רצים מודלים פתוחים כמו SDXL-Lightning, AuraFlow, Kolors, LTX-Video, PixArt-Sigma, PixArt-XL וגרסת Playground v2. לצד אלה פועל Llama-Guard-3-8B לסינון תוכן, והנתונים נשענים על מחקר ודאטהסטים של TIGER-Lab להערכה אנושית.
מתאים ל
- השוואת מודלי תמונה
מריצים את אותה הנחיה על SDXL-Lightning ו־Kolors ורואים מי נותן תוצאה מדויקת יותר.
- בדיקת מחוללי וידאו
בוחנים יכולות הנפשה ויצירת וידאו מטקסט באמצעות LTX-Video ישירות מהממשק.
- בחינת דירוגי איכות
נעזרים בלוחות ה־ELO כדי להבין איזה מודל פתוח מוביל לפי הצבעות משתמשים.
איפה זה נופל
הבעיה המרכזית כרגע היא מצב שגיאת בנייה בעמוד, מה שאומר שהממשק פשוט לא עובד אונליין ואי אפשר להריץ בו בדיקות בלי להוריד את הקוד ולהרים אותו עצמאית. בנוסף, חומרת שיתוף כמו A10G שמופעלת רק לפי דרישה גורמת לעיכובים ביצירת וידאו כבד עם מודל כמו LTX-Video, שדורש משאבים משמעותיים.
אם אתם מתכננים להסתמך על לוחות הדירוג, קחו בחשבון שהם מוגבלים למודלים הפתוחים שמוגדרים במערכת בלבד, ולא משקפים מודלים קנייניים מובילים שלא נמצאים שם.
שאלות
נפוצות
האם השירות כרוך בתשלום?
הקוד והממשק מוצעים בקוד פתוח תחת רישיון MIT ללא עלות. עם זאת, נכון לעכשיו העמוד נמצא במצב של שגיאת בנייה ולכן אינו פעיל להרצה ישירה ברשת.
אפשר להריץ את המערכת מקומית?
כן, מפתחי הכלי צירפו הוראות התקנה מלאות לקודה 11.8 ו־12.1. מורידים את הקוד, מתקינים את התלויות ומריצים את קובץ האפליקציה עם שרת הלוגים.
מה קורה עם התמונות וההנחיות שמזינים?
המערכת מתעדת את ההנחיות וההצבעות כדי לחשב דירוגי ELO ולעדכן את מחקרי הביצועים של המעבדה. אם מריצים אותה מקומית, כל המידע נשמר על השרת שלכם.
במה זה שונה מלהוריד כל מודל לבד?
המערכת מאגדת מגוון מודלים שונים של תמונה ווידאו לממשק אחד ומציגה אותם זה מול זה במבחן עיוור. זה חוסך את ההתקנה וההגדרה של כל מודל בנפרד רק בשביל להשוות.
איך משתמשים
נכנסים לממשק ובוחרים לשונית לפי סוג המשימה, כותבים הנחיה ולוחצים על כפתור ההרצה כדי לקבל תוצאות זו לצד זו. אין צורך בהתחברות מיוחדת כדי לבדוק את הדגמים הפתוחים.
הקוד בנוי לרוץ על חומרת zero-a10g שמספקת כוח עיבוד של אנבידיה לפי דרישה, אבל כרגע העמוד מדווח על שגיאת בנייה בשרת ולכן אי אפשר להריץ אותו ישירות בדפדפן עד שיתקנו את התקלה.
הרישיון
הקוד פתוח תחת רישיון MIT, שמאפשר שימוש חופשי, שינוי והפצה כולל לצרכים מסחריים. יחד עם זאת, הפלטים והמודלים עצמם כפופים לתנאי השימוש והמגבלות של כל מודל בנפרד, כמו משפחת PixArt או LTX-Video.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש