Emu2 — הדגמה

מה זה

הממשק מחולק לשתי לשוניות נפרדות, אחת מוקדשת לצ׳אט והשנייה ליצירה. בצד של השיחה מזינים טקסט או תמונות כדי לקבל תשובות שמבוססות על המודל Emu2-Chat. בצד של היצירה מקלידים הנחיות טקסטואליות כדי להפיק תמונות באמצעות Emu2-Gen, לצד מודל הבסיס Emu2 שמחבר את היכולות האלו יחד.

הקוד עצמו בנוי על Gradio וטוען שני רכיבי ממשק שונים, build_chat ו־build_generation. הוא מציג סביבת עבודה אחת עם ערכת נושא כחולה, בלי שכבות גרפיות מורכבות מסביב. כל הלוגיקה מתרכזת בפנייה ישירה אל שלושת המודלים של BAAI, שנועדו לקלוט ולהפיק גם שפה וגם תמונה באותה ארכיטקטורה.

מתאים ל

• בדיקת יכולות המודל

  ניסיון מעשי עם ממשק השיחה והיצירה לפני שמורידים את המשקלים הגולמיים.

• השוואת תוצרי תמונה

  בחינת איכות התמונות שמפיק Emu2-Gen מול מודלים מתחרים.

• שיחה מולטימודלית

  העלאת תמונות ושאלת שאלות עליהן מול Emu2-Chat.

איפה זה נופל

הבעיה המיידית היא שהמרחב פשוט שבור ולא מגיב. הדגמה על חומרת מעבד בסיסית מטעה לגבי היכולות של המודלים, כי יצירת תמונות וניתוח ויזואלי דורשים כוח מחשוב שלא קיים כאן. אם אתם מחפשים לבדוק ביצועים אמיתיים בזמן אמת, ההדגמה הזו לא תספק את זה כרגע.

איך משתמשים

כרגע אי אפשר להריץ את ההדגמה ישירות בדפדפן כי השרת שלה נמצא במצב שגיאת ריצה. מעבר לזה, המרחב מוגדר על חומרת מעבד בסיסית, כך שגם כשהקוד יתוקן, מודלים רב-תחומיים כבדים כאלה יזחלו שם בלי מעבד גרפי צמוד. כדי להשתמש בה תצטרכו להמתין לעדכון הקוד או לשכפל את המרחב לחומרה שלכם.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי, שינוי והפצה של הקוד. עם זאת, אין בתיעוד מידע לגבי שמירת נתונים או תמונות שאתם מעלים, ולכן עדיף לא להזין חומרים פרטיים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗