GPT
J

Janus-Pro-7B — הדגמה

קוד פתוח

deepseek-aimit2025-01-27

  • gradio

ממשק שמנתח תמונות שאתם מעלים ומייצר תמונות חדשות מטקסט תחת מודל אחד. הוא מתאים למי שרוצה לבדוק יכולות ראייה ויצירה בלי להרים סביבת פיתוח מקומית.

  • 13.8 GBמשקל הקבצים
  • הורדות בחודש
  • 2,020לייקים

מה זה

הממשק מחולק לשתי לשוניות נפרדות. בלשונית הראשונה מעלים תמונה, מקלידים שאלה בתיבת הטקסט ומקבלים תשובה מילולית שמנתחת את מה שמופיע בקובץ. בלשונית השנייה כותבים תיאור טקסטואלי ומקבלים גלריה של ארבע תמונות שנוצרו מההנחיה.

מאחורי הקלעים רץ המודל Janus-Pro-7B של deepseek-ai, שמטפל גם בהבנה וגם ביצירה באמצעות ארכיטקטורה משולבת. ביצירת התמונות יש שלב נוסף שלא שייך למודל עצמו, הקוד מעביר את התוצאות דרך Real-ESRGAN כדי להגדיל אותן פי שניים ולחדד את התצוגה.

מתאים ל

  • ניתוח תמונות והסבר תוכן

    מעלים תמונה ושואלים שאלות על הפרטים שמופיעים בה כדי לקבל פירוט טקסטואלי ממוקד.

  • יצירת תמונות מטקסט

    מקלידים תיאור מפורט ומקבלים גלריה של ארבע תמונות שונות שנוצרו לפי ההנחיה.

  • בדיקת יכולות המודל

    משנים פרמטרים כמו טמפרטורה וערכי seed כדי לראות איך המודל מגיב ברמות דיוק שונות.

איפה זה נופל

התוצאה שרואים ביצירת תמונות מעט מטעה, כיוון שההדגמה מפעילה מודל הגדלה נפרד שמחדד את הפלט, כך שלא רואים את התוצר הגולמי של Janus בלבד. בנוסף, מודל של שבעה מיליארד פרמטרים עלול לפספס פרטים עדינים בניתוח ויזואלי מורכב או בטקסטים קטנים. כדאי לבדוק אותו מול מקרים ספציפיים לפני שמסתמכים עליו בעבודה שדורשת דיוק עובדתי.

שאלות
נפוצות

האם השימוש בממשק עולה כסף?

לא, השימוש בדפדפן פתוח לגמרי ואינו דורש תשלום. כל עוד ההדגמה פועלת ברשת אפשר להריץ אותה ישירות.

כמה זמן לוקח לקבל תשובה או תמונה?

העיבוד מתבצע על גבי מאיץ zero-a10g, כך שפעולה לוקחת בדרך כלל שניות בודדות עד חצי דקה. אם השרת עמוס, זמן ההמתנה עשוי להתארך בהתאם לתור באותו רגע.

במה התמונות שנוצרות כאן שונות ממה שהמודל מייצר לבד?

בהדגמה הזו מופעל מודל נוסף בשם Real-ESRGAN שמבצע הגדלה של פי שניים על הפלט. אם תריצו את Janus-Pro-7B לבד בקוד נקי, התמונות שיתקבלו יהיו ברזולוציה בסיסית ופחות חדה.

האם אפשר להריץ את זה באופן מקומי?

כן, המודלים והקוד פתוחים ברישיון MIT וניתנים להורדה. כדי להריץ את שניהם אצלכם תצטרכו חומרה מתאימה עם כרטיס גרפי שתומך במודל של שבעה מיליארד פרמטרים.

איך מריצים

בוחרים לשונית, ממלאים את שדות הטקסט או התמונה ולוחצים על כפתור ההפעלה, Chat לניתוח או Generate Images ליצירה. יש גם אפשרויות מתקדמות לשליטה בערכי seed, temperature ומשקל CFG.

ההרצה מתבצעת על חומרת zero-a10g בשרתי Spaces. מכיוון שמדובר במשאב שיתופי שמוקצה לפי דרישה, ייתכן שתמתינו בתור קצר לפני שהעיבוד מתחיל, אך הריצה עצמה נתמכת במאיץ גרפי ייעודי.

pip install -U huggingface_hub
hf download deepseek-ai/Janus-Pro-7B

הרישיון

הפרויקט מפורסם תחת רישיון MIT. הרישיון הזה מתיר שימוש חופשי בקוד, כולל שינוי, הפצה ומסחור, בכפוף להשארת הודעת זכויות היוצרים המקורית.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא בעמוד המודל ↗