Deepseek-Multimodal

מה זה

האפליקציה מחולקת לשני חלקים ברורים. בחלק הראשון אתם מעלים תמונה, מקלידים שאלה בטקסט חופשי ומקבלים תשובה מילולית שמנתחת את מה שמופיע בה. בחלק השני אתם כותבים תיאור טקסטואלי ומקבלים תמונות שנוצרות ישירות ממנו.

מאחורי הקלעים רץ המודל Janus-Pro-7B של חברת deepseek-ai, שמטפל גם בהבנת ראייה וגם ביצירת תמונות. הממשק מציע דוגמאות מובנות לניתוח בדיקות רפואיות לצד דוגמאות ליצירת תמונות, ומשלב כפתורים לקביעת מדדי יצירתיות ודיוק כמו טמפרטורה, סיד ומשקל הנחיה.

מתאים ל

• ניתוח תמונות ופענוח

  מעלים תמונה של מסמך או ממצא ושואלים עליה שאלות כדי לקבל פענוח מילולי מפורט.

• יצירת תמונות מטקסט

  מקלידים תיאור של סצנה, מכוונים את הגדרות הדיוק ומקבלים תמונה שנוצרה לפי ההנחיה.

• בדיקת המודל Janus-Pro-7B

  בוחנים איך המודל של דיפסיק מתמודד עם שאלות מורכבות לעומת מודלים מתחרים.

איפה זה נופל

הבעיה המרכזית היא שהעמוד כרגע פשוט לא עובד ומציג שגיאה. גם כשהוא פועל, חומרת מעבד בסיסית מוגבלת מאוד מול מודל של שבעה מיליארד פרמטרים. בנוסף, למרות שיש שם דוגמאות לניתוח רפואי, מודל כזה אינו תחליף לייעוץ מקצועי ואי אפשר להסתמך עליו בהחלטות בריאותיות.

איך משתמשים

בפועל נכנסים לדפדפן, בוחרים בלשונית הניתוח או בלשונית היצירה, מזינים קובץ או תיאור ולוחצים על הכפתור המתאים. המערכת רצה על חומרת מעבד בסיסית, מה שהופך הרצה של מודל כזה לאיטית מאוד.

מעבר לכך, העמוד מדווח כרגע על שגיאת זמן ריצה (RUNTIME_ERROR). המשמעות היא שכרגע אי אפשר להריץ בו פקודות עד שהיוצר יתקן את הקוד או את משאבי השרת.

הרישיון

הקוד של האפליקציה מפורסם תחת רישיון MIT. הרישיון הזה מתיר שימוש חופשי בקוד, כולל שינוי והפצה, אך המודל עצמו כפוף לתנאי השימוש שקבעה דיפסיק.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗