ReSize-Image-Outpainting

מה זה

אתם מעלים תמונה, בוחרים יחס תצוגה מבוקש וכיוון יישור, ומקבלים תמונה מורחבת שהחלקים החסרים בה הושלמו אוטומטית. אפשר להוסיף הנחיית טקסט קצרה כדי לכוון את מה שייווצר מסביב, אבל זה לא חובה. הממשק כולל סליידר שמשווה בין המקור לתוצאה, תצוגה מקדימה של המסכה, וגלריית היסטוריה שמאפשרת לקחת תוצאה ולהשתמש בה שוב כקלט להרחבה נוספת.

מאחורי הקלעים הקוד מחבר כמה מודלים כבדים יחד. הוא משתמש ב־RealVisXL V5.0 בגרסת Lightning ליצירה מהירה, יחד עם ControlNet Union ל־SDXL ורכיב מבית TencentARC כדי לשמור על דיוק במבנה. כדי לחבר את התמונה החדשה למקורית בלי שיראו תפרים, המערכת משתמשת בפייפליין ייעודי בשם StableDiffusionXLFill וב־VAE מתוקן של sdxl שמריץ שמונה צעדי דגימה כברירת מחדל.

מתאים ל

• התאמת תמונות אנכיות לרשת

  הרחבת תמונה שצולמה בעמידה לגודל רחב של 1440 על 810 בלי לחתוך את הנושא.

• ריבוע תמונות לפרופיל

  השלמת שוליים עליונים או תחתונים כדי להביא צילום קיים לפריסה של 1024 על 1024.

• הוספת רקע לפי כיוון

  הסטת התמונה המקורית לצד אחד והשלמת השטח הריק בהתאם להנחיית טקסט חופשית.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה תקועה ולא נבנית, ולכן אי אפשר להריץ בה שום דבר כרגע. מעבר לכך, מודלים של הרחבת תמונה נוטים למרוח פרטים או להמציא אלמנטים מוזרים כשמרחיבים שטחים גדולים מדי בבת אחת.

טווח צעדי הדגימה בקוד מוגבל ל־4 עד 12 צעדים בלבד. זה נועד למהירות בזכות גרסת ה־Lightning, אך טווח כזה עשוי לפגוע בחדות של רקעים מורכבים ולייצר חוסר התאמה בתאורה בין המרכז לשוליים.

איך משתמשים

כרגע אי אפשר להשתמש באפליקציה הזאת ישירות ברשת. העמוד מדווח על שגיאת בנייה (BUILD_ERROR), כך שהשרת כלל לא עלה ולא מציג את הממשק הפעיל.

גם כשהיא פועלת, החומרה המוגדרת לה היא מעבד בסיסי בלבד. המודלים שרשומים בקוד דורשים משאבי חישוב כבדים וכרטיס מסך כדי לרוץ בקצב הגיוני, כך שעל מעבד פשוט זמן ההמתנה לכל תמונה יהיה ארוך במיוחד.

הרישיון

הקוד מופץ ברישיון Apache 2.0 שמתיר שימוש מסחרי ושינויים בקוד. לגבי המודלים הפנימיים והתמונות שנוצרות, יש לבדוק בנפרד את תנאי השימוש של RealVisXL ושל ControlNet Union שמופעלים שם.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗