GPT
I

Image-Gen-Pro

רץ בדפדפן

KingNishרישיון לא דווח2024-05-29

  • gradio

ממשק ליצירה ועריכה של תמונות שמחבר כמה גרסאות של מודלי SDXL תחת מסך אחד. מתאים למי שרוצה לבדוק הנחיות טקסט או לשנות תמונה קיימת ישירות בדפדפן.

  • הורדות בחודש
  • 314לייקים

מה זה

הממשק מקבל הנחיית טקסט בתיבת שיחה אחת, ובמצב עריכה אפשר להעלות גם קובץ תמונה. התוצאה שיוצאת היא תמונה יחידה שנוצרת מאפס או גרסה ערוכה של התמונה שהעליתם, בהתאם למשימה שבחרתם בתפריט.

מאחורי הקלעים רץ שילוב של מספר מודלים. הבסיס הראשי הוא RealVisXL בגרסה 4.0 שנועד לתמונות פוטוריאליסטיות, ויש גם גרסת Lightning מהירה לאותו מודל. לצדם נטענים רפיינר רשמי של SDXL, קובץ של cosxl לעריכת תמונות לפי הנחיה, ותיקון ה־VAE של ollin למניעת שגיאות נקודה צפה. לצורך הרחבת הטקסט בתיבת הבחירה הייעודית, הקוד טוען את מודל השפה Zephyr 7B.

מתאים ל

  • יצירת תמונות ריאליסטיות

    הרצת הנחיות טקסט ישירות על מודל RealVisXL לקבלת תמונות מפורטות בלי להתקין סביבה מקומית.

  • עריכת תמונות קיימות

    העלאת קובץ ושינוי אלמנטים מתוכו על ידי כתיבת הוראות טקסט בעזרת מודול העריכה של cosxl.

  • הרחבת פרומפטים אוטומטית

    בדיקת ניסוחים קצרים כשהמערכת משתמשת במודל Zephyr כדי להרחיב את ההנחיה לפני יצירת התמונה.

איפה זה נופל

הבעיה המרכזית כרגע היא שהאפליקציה נמצאת במצב מושהה ולא פעילה ברשת. מעבר לזה, הממשק מציע בחירת מידות עד 2048 פיקסלים למרות שמודלי SDXL אומנו ומפיקים תוצאות טובות בעיקר באזור 1024 פיקסלים, כך שחריגה למעלה עלולה לעוות את התוצאה. תיקון הטקסט מוסיף עיבוד נוסף של מודל שפה, ולא תמיד מנחש נכון את כוונת ההנחיה המקורית.

שאלות
נפוצות

האם השימוש בממשק עולה כסף?

השימוש בממשק עצמו הוא בחינם ורץ על גבי שרתי Hugging Face. אין צורך לשלם מנוי כדי לגשת לפקדים. עם זאת, נכון לעכשיו הוא מוגדר במצב מושהה ולכן אי אפשר להריץ אותו ישירות.

כמה זמן לוקח לייצר תמונה?

הזמן משתנה בהתאם למצב שנבחר, כאשר אפשרות ה־Fast משתמשת בגרסת Lightning שמקצרת את התהליך לכמה שניות. הממשק מזהיר שההרצה הראשונה לוקחת יותר זמן בגלל טעינת המשקלים לזיכרון. מידות גדולות או הפעלת הרפיינר יאריכו את ההמתנה.

האם אפשר לקחת את הקוד ולהריץ אותו במחשב שלי?

הקוד כתוב בפייתון ומשתמש בספריית diffusers סטנדרטית, כך שניתן להעתיק אותו. תצטרכו כרטיס מסך מתאים עם מספיק זיכרון כדי להחזיק את SDXL ומודל השפה במקביל. בנוסף תצטרכו להוריד את קובצי המשקלים של כל המודלים שמצוינים בקוד.

מה קורה עם הקבצים וההנחיות שאני מעלה?

הקבצים מעובדים על גבי השרת שמריץ את מופע ה־Gradio בזמן אמת. אין כאן מנגנון שמירת היסטוריה אישי או ניהול חשבון. אם מפעילים את הממשק כשהוא ציבורי, הנתונים מועברים לצורך עיבוד התמונה בלבד.

איך משתמשים

בוחרים בין יצירה לעריכה, כותבים הנחיה בתיבת הטקסט, ומסמנים אם רוצים יצירה מהירה או שיפור הנחיה באמצעות מודל השפה. בהגדרות המתקדמות אפשר לקבוע מידות בין 256 ל־2048 פיקסלים, מספר צעדים, סיד והנחיה שלילית, ואז לוחצים על כפתור ההרצה. החומרה שהוקצתה להרצה היא כרטיס A10G במצב חסכוני, אך הממשק מציין במפורש שהיצירה הראשונה דורשת זמן טעינה ממושך יותר.

הרישיון

הרישיון של היישום עצמו לא דווח בעמוד. המודלים שנטענים בקוד שייכים לפרויקטים שונים כמו Stability AI וקהילת הקוד הפתוח, ולכל אחד מהם תנאי שימוש משלו. ללא רישיון ברור לממשק, קשה לדעת מה הזכויות על תוצרים מסחריים שמופקים דרכו.

הרישיון המלא ב־Hugging Face ↗