GPT
E

Enhance-This-DemoFusion-SDXL

רץ בדפדפן

radamesרישיון לא דווח2023-12-07

  • gradio

האפליקציה משדרגת תמונות לרזולוציה גבוהה באמצעות שילוב של טכניקת DemoFusion ומודל SDXL. היא מיועדת למי שרוצה להגדיל תמונה קיימת ולהוסיף לה פרטים חדים בעזרת הנחיות טקסט.

  • הורדות בחודש
  • 300לייקים

מה זה

אתם מעלים תמונת מקור ומזינים תיאור טקסט חיובי ושלילי. הממשק מבוסס על שילוב כבד של מודלים, הכולל את Stable Diffusion XL Base יחד עם ControlNet Canny לשמירה על קווי המתאר, VAE מתוקן מבית madebyollin, ושני מקודדי CLIP של OpenAI ו־LAION.

הטכניקה של DemoFusion מייצרת הגדלה יצירתית מרובת שלבים. מתחת למכסה המנוע יש שליטה עמוקה בפרמטרים כמו סולמות קוסינוס בשלוש רמות, סיגמה, ומשקלי הפעלה של ה־ControlNet. בדוגמאות המוכנות תמצאו תמונות כמו סייברטראק, דמויות ואובייקטים מורכבים שמציגים את תוספת הפרטים בתוצאה המוגדלת.

מתאים ל

  • הגדלת תמונות מורכבות

    שיפור רזולוציה והוספת פרטים חדים לקבצים קיימים באמצעות הנחיות טקסט מדויקות.

  • שמירה על קווי מתאר

    הגדלת תמונות בעזרת ControlNet מבוסס Canny כדי שהמבנה המקורי לא יתעוות.

  • בחינת פרמטרים של DemoFusion

    כוונון ערכי סיגמה וסולמות קוסינוס כדי להבין את השפעת שיטת השדרוג על איכות התוצר.

איפה זה נופל

הבעיה המרכזית כרגע מוחלטת: המצב של האפליקציה הוא שגיאת זמן ריצה, כך שהיא לא שמישה ברשת כלל. מעבר לכך, מודל SDXL יחד עם ControlNet דורש כוח עיבוד גרפי כבד מאוד, והרצה על מעבד בסיסי נידונה לכישלון או לזמני המתנה של שעות. הדוגמאות השמורות מציגות תוצאה שחושבה מראש ולא מעידה על יכולת הרצה חיה במצב הנוכחי.

שאלות
נפוצות

האם האפליקציה עובדת כרגע בדפדפן?

לא, היא תקועה במצב של שגיאת זמן ריצה ולא ניתן לעבד בה תמונות חדשות. אפשר רק לראות את מבנה הממשק והקוד. כדי להשתמש בה באמת תצטרכו להעתיק את הקוד ולהריץ אותו בסביבה תקינה.

כמה עולה להשתמש בה?

הגישה לעמוד פתוחה וחינמית לחלוטין ללא צורך ברישום או תשלום. עם זאת, מכיוון שהיא מוגדרת על שרת מעבד פשוט שקורס, אין כרגע יכולת שימוש אמיתית ללא שדרוג חומרה בתשלום מצד המפתח. כרגע לא מושקעים בה משאבי ענן פעילים.

האם אפשר להריץ את הכלי על המחשב האישי?

כן, הקוד הציבורי כתוב בפייתון בעזרת ספריית diffusers ו־Gradio. תצטרכו כרטיס מסך חזק מאוד עם זיכרון ייעודי כדי להחזיק את SDXL ביחד עם ControlNet ורכיבי ה־VAE. ללא מאיץ גרפי מתאים המערכת תהיה איטית מדי לשימוש מעשי.

במה היא שונה משימוש רגיל ב־SDXL?

היא לא סתם יוצרת תמונה יש מאין על בסיס טקסט. התהליך לוקח תמונה קיימת ומפעיל את שיטת DemoFusion שמשלבת אלגוריתם מרובה שלבים יחד עם זיהוי קצוות. המטרה היא להגדיל את התמונה תוך שמירה על המבנה המקורי והוספת פרטים עדינים.

איך משתמשים

לוחצים על כפתור ההרצה לאחר בחירת התמונה וכתיבת הפרומפט, או שבוחרים באחת הדוגמאות השמורות במערכת. הממשק מציג מד התקדמות מובנה שמבוסס על tqdm, והתוצאות מוצגות ברכיב השוואה ומאפשרות הורדת קבצים ישירה.

בפועל אין כרגע אפשרות להריץ אותה בדפדפן. העמוד מוגדר על חומרת מעבד בסיסית וקורס מיד עם שגיאת זמן ריצה עוד לפני תחילת העבודה.

הרישיון

הרישיון של המרחב עצמו לא דווח בקוד או בהגדרות. המשמעות היא שאין הרשאה ברורה ומפורשת לשימוש מסחרי בקוד של ההדגמה או בתוצרים שלה, אם כי המודלים ברקע מגיעים ממאגרים ציבוריים עם תנאי שימוש משלהם.

הרישיון המלא ב־Hugging Face ↗