T2I-Adapter-SDXL

מה זה

אתם מספקים תמונת מקור להנחיה מבנית יחד עם תיאור טקסטואלי, ומקבלים תמונה חדשה ששומרת על הקומפוזיציה המקורית. הממשק מחולק לשתי לשוניות עבודה, לשונית בסיסית ולשונית שמוקדשת לסקיצות, כך שאפשר לבחור את סגנון ההנחיה שמתאים לחומר הגלם שלכם.

מאחורי הקלעים רץ שילוב של Stable Diffusion XL יחד עם סדרת מתאמים ייעודיים של Tencent. המערכת כוללת מודלים לחילוץ קווי מתאר בשיטות Canny ו־Lineart, מפות עומק בשיטות Midas ו־Zoe, וזיהוי תנוחות גוף דרך OpenPose. כל אלה מתחברים למפענח תיקון ייעודי בפורמט חצי דיוק כדי להבטיח תוצאה ויזואלית חדה ויציבה.

מתאים ל

• הפקת דמויות בתנוחה מוגדרת

  יצירת דמויות חדשות ב־SDXL שנשענות על תנוחת גוף מדויקת באמצעות מתאם OpenPose.

• הפיכת סקיצות להדמיות

  העלאת שרבוט ידני או קווי מתאר בלשונית הייעודית לקבלת תמונה מלאה לפי פרומפט.

• שמירה על עומק ומרחב

  שימוש במפות עומק כדי לבנות סצנות חדשות ששומרות בדיוק על המרחקים של תמונת המקור.

איפה זה נופל

הבעיה המיידית היא סטטוס התקלה הפעיל, שמונע שימוש ממשי בממשק כרגע ומציג שגיאה במקום תמונה. אי אפשר לבנות על הדמו הזה לעבודה שוטפת ברשת.

בנוסף, מתאמים מהסוג הזה תלויים לחלוטין באיכות חילוץ המאפיינים מתמונת המקור. קווי מתאר דקים מדי או תנוחות גוף שמסתירות איברים יגרמו למודל להמציא פרטים מעוותים או להתעלם מחלקים במבנה שרציתם לשמר. אל תצפו לשחזור מושלם אם תמונת הקלט לא מופרדת היטב מהרקע.

איך משתמשים

נכנסים לממשק, בוחרים בלשונית הרצויה, מעלים את תמונת הייחוס, כותבים את הפרומפט ולוחצים על כפתור ההפעלה. אין צורך בהרשמה מיוחדת או בהתחברות כדי לבדוק את היכולות בדפדפן.

ההדגמה מוגדרת לרוץ על מאיץ גרפי מסוג L4 יחיד בתוך מכולת דוקר, חומרה שמסוגלת לעבד מודלים כבדים כמו SDXL תוך שניות בודדות. עם זאת, נכון לעכשיו העמוד מדווח על שגיאת זמן ריצה פנימית, כך שהכפתורים לא יגיבו בפועל עד שהיוצרים יתקנו את ההרצה בשרת.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי בקוד ובמשקולות לצרכים מסחריים ופרטיים, לצד שינוי והפצה. התמונות שאתם מעלים או מפיקים נשארות שלכם בכפוף לרישיונות של מודל הבסיס SDXL והמתאמים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗