SD35-IP-Adapter
רץ בדפדפןInstantXother2024-11-19
הדגמה שמאפשרת להזין תמונה וטקסט כדי להנחות יצירה של תמונה חדשה על בסיס Stable Diffusion 3.5. היא מיועדת למי שרוצה לבחון יכולות IP-Adapter ישירות בדפדפן.
- —הורדות בחודש
- 74לייקים
מה זה
אתם מעלים תמונת מקור, כותבים תיאור טקסטואלי, וקובעים את עוצמת ההשפעה של התמונה באמצעות סליידר ייעודי. בתפריט ההגדרות המתקדמות אפשר לשנות גם את מידות התמונה, הסיד, ובחירה בסיד אקראי. בסיום הריצה מקבלים תמונה שמשלבת את הרעיון החזותי מהתמונה שהזנתם יחד עם ההנחיות מהטקסט.
מאחורי הקלעים הקוד משתמש במימוש של פייפליין ל־Stable Diffusion 3 בשילוב משקלי IP-Adapter ייעודיים שנבנו עבור SD 3.5 Large. לצד המודל הראשי נטענים מודלי חזון וטקסט של גוגל ו־OpenAI, ביניהם SigLIP ו־T5 XXL, שמנתחים את התמונה והפרומפט לפני שלב היצירה.
מתאים ל
- העברת סגנון ודמות
יצירת גרסאות חדשות לדמות או עצם מתוך תמונת מקור, עם שינוי סביבה ותאורה לפי הנחיית טקסט.
- בדיקת משקלי IP-Adapter
בחינת יכולת ההצמדה של המודל לקלט חזותי ב־SD 3.5 ישירות מול ממשק הדפדפן.
- השראה ויזואלית מהירה
הפקת סקיצות גרפיות שמתבססות על קומפוזיציה קיימת יחד עם רעיונות חדשים בתיאור.
איפה זה נופל
הקוד מגדיר מודל מסוג Stable Diffusion 3.5, למרות שבתיאור הדף יש אזכור סותר למודל פלוקס. מעבר לכך, הממשק הוא גרסת בדיקה בסיסית מאוד שמציעה רק שליטה בעוצמה ובגודל, ללא אפשרות לשלב כמה תמונות רפרנס במקביל או לשלוט בחלקי תמונה נפרדים.
שאלות
נפוצות
האם השימוש פתוח בחינם?
כן, הממשק רץ על תשתית ציבורית ופתוח לניסיון ישירות מהדפדפן. אין צורך בהרשמה בתשלום כדי לבדוק אותו, אך זמינות המשאבים תלויה בעומס על השרת.
מה קורה עם התמונות שמעלים לכלי?
התמונות עוברות עיבוד בזיכרון של השרת לצורך קידוד המאפיינים והרצת המודל. אין תיעוד על שמירה קבועה שלהן, אך מדובר בסביבה פומבית ולכן לא מומלץ להעלות חומרים רגישים.
האם אפשר להריץ את זה מקומית על המחשב?
כן, הקוד הציבורי מבוסס על ספריות סטנדרטיות ומשקלים הזמינים להורדה. עם זאת, נדרש כרטיס מסך חזק כדי להחזיק בזיכרון את המודל הגדול יחד עם SigLIP ו־T5 XXL.
במה הכלי שונה מהרצת SD 3.5 רגילה?
במקום להסתמך רק על מילים, הכלי מקבל תמונה כהנחיה חזותית ישירה. מתאם ה־IP-Adapter מחלץ את המאפיינים שלה ומזין אותם למודל היצירה כדי לשמור על דמיון למקור.
איך משתמשים
לוחצים על כפתור Generate אחרי העלאת התמונה והזנת הטקסט. הריצה מתבצעת על חומרת Zero A10G שמוקצית לפי דרישה. יש להמתין לעיבוד הכולל את קידוד התמונה והרצת מודל הדיפוזיה הגדול, כך שבעומס ייתכן תור קצר או זמני תגובה איטיים.
הרישיון
הרישיון של המרחב מוגדר כ־other, ללא פירוט פומבי של תנאי שימוש מלאים בקוד. יש לבדוק את תנאי הרישיון המקוריים של SD 3.5 ומשקלי ה־IP-Adapter של InstantX לפני שימוש בתוצרים לצרכים שאינם מחקר או בדיקה.