janus-pro-webgpu

מה זה

האפליקציה מקבלת הוראות טקסט ומסוגלת לנתח תמונות או לייצר תמונות חדשות, הכל באותו ממשק. אתם מזינים קלט טקסטואלי או קובץ חזותי, והמערכת פולטת ניתוח כתוב או תמונה שנוצרה מאפס לפי הבקשה.

מאחורי הקלעים רץ המודל Janus-Pro-1B בגרסת ONNX, שעבר המרה כדי לפעול עם ספריית Transformers.js. מדובר במודל אחוד שמטפל בהבנה של מידע ויזואלי וגם ביצירה שלו באמצעות מנגנון יחיד, במקום להפריד בין מודלים שונים לכל פעולה. הכל עובד על בסיס React ו־Vite שמרכיבים ממשק ווב פשוט המחובר למנוע הריצה המקומי.

מתאים ל

• ניתוח תמונות מקומי

  מעלים תמונה ומבקשים תיאור או תשובות לשאלות עליה, בלי להעלות קבצים לרשת.

• יצירת תמונות בדפדפן

  כותבים הנחיה טקסטואלית קצרה ומייצרים תמונה ישירות על גבי החומרה שלכם.

• בדיקת ביצועי WebGPU

  בוחנים איך כרטיס המסך מתמודד עם מודל מולטימודלי של מיליארד פרמטרים.

איפה זה נופל

זה מודל קטן של מיליארד פרמטרים בלבד, כך שאיכות הניתוח ורמת הדיוק ביצירת התמונות מוגבלות משמעותית בהשוואה למודלי ענק מסחריים. בנוסף, אם כרטיס המסך שלכם חלש או שהדפדפן לא מוגדר כראוי להרצת WebGPU, הכל יזחל או יתרסק לגמרי. אל תבנו על זה למשימות קריטיות שדורשות אמינות גבוהה או עיבוד מדויק של פרטים מורכבים.

איך משתמשים

פותחים את העמוד בדפדפן תומך ומזינים את הפרומפט או התמונה שלכם. אין צורך בהרשמה, אין תור ואין שליחת בקשות לשרת מרוחק, אבל המחשב שלכם עושה את כל העבודה הכבדה. המהירות בפועל תלויה ישירות בכרטיס המסך שלכם, כי המודל רץ בעזרת האצת WebGPU מקומית, מה שדורש דפדפן עדכני וחומרה גרפית סבירה כדי לא להיתקע.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי בקוד, כולל התאמה לצרכים מסחריים ופרטיים. היות והעיבוד מתבצע כולו על המחשב שלכם דרך הדפדפן, המידע והתמונות שאתם מעלים או מייצרים נשארים אצלכם מקומית ולא נשלחים לשום מקום.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗