UltraEdit-SD3
רץ בדפדפןjeasinemaother2024-07-02
מעלים תמונה, מוחקים חלקים בעזרת מברשת או משאירים אותה שלמה, וכותבים הוראת עריכה בטקסט. הממשק מיועד למי שרוצה לערוך תמונות באמצעות פקודות ישירות ומסכות במקום לייצר הכל מאפס.
- —הורדות בחודש
- 69לייקים
מה זה
מעלים תמונה לתוך ממשק העבודה ובוחרים אם לצייר עליה מסכה עם עט או להשאיר אותה נקייה. מזינים הנחיית טקסט קצרה שמתארת את השינוי הרצוי, וקובעים פרמטרים כמו מספר צעדי חישוב, עוצמת ההצמדה לטקסט ועוצמת ההצמדה לתמונה המקורית. בתום העיבוד מקבלים תמונה חדשה יחד עם חיווי שמציין את מצב העריכה שבוצע בפועל.
מאחורי הקלעים רץ צינור עיבוד של Stable Diffusion 3 המותאם לעריכה לפי הוראות, תחת המודל BleachNick/SD3_UltraEdit_w_mask ובדיוק של חצי דיוק fp16. המערכת מקושרת גם למאגרי נתונים ומודלים תומכים אחרים מעולם הדיפוזיה, וכוללת דוגמאות מובנות מראש שנטענות ישירות לממשק.
מתאים ל
- עריכה ממוקדת עם מסכה
צובעים אובייקט ספציפי בתמונה בעזרת המברשת ומשנים אותו באמצעות פקודת טקסט ממוקדת.
- עריכת תמונה שלמה ללא מסכה
משנים סגנון, צבעים או תאורה בכל שטח התמונה בלי לסמן אזורים ספציפיים.
- בדיקת יכולות SD3 בעריכה
משחקים עם פרמטרי הצימוד השונים כדי לבחון איך מודל ההוראות מגיב לשינויים.
איפה זה נופל
הבעיה המיידית היא שהאפליקציה פשוט לא עובדת ומוגדרת בשגיאת ריצה, ולכן אין אפשרות לבדוק אותה כרגע ישירות בעמוד. מעבר לזה, השליטה מתבססת על שילוב מדויק בין הנחיית הטקסט לערכי הצימוד השונים, מה שדורש התעסקות עם פרמטרים כדי להימנע מעיוותים של התמונה המקורית.
שאלות
נפוצות
האם האפליקציה פועלת כרגע בחינם בדפדפן?
הגישה לעמוד היא חינמית לחלוטין וללא צורך ברישום מיוחד. עם זאת, נכון לעכשיו היא נמצאת במצב של תקלת ריצה ולא ניתן להפיק בה תמונות בפועל עד שהתקלה תיפתר.
האם אפשר להריץ את הכלי הזה באופן מקומי?
כן, הקוד הראשי מבוסס על ספריית diffusers הסטנדרטית ופייתון. אפשר למשוך את המודל BleachNick/SD3_UltraEdit_w_mask ולהריץ אותו על מחשב עם מעבד גרפי מתאים שתומך ב־CUDA.
מה קורה עם התמונות שמעלים לממשק?
התמונות מועברות ישירות לשרת שמריץ את הממשק כדי לבצע את תהליך הדיפוזיה. היות ומדובר בחלל הרצה ציבורי ללא פירוט פרטיות מיוחד, מומלץ לא להעלות תמונות רגישות או פרטיות.
במה הממשק הזה שונה מהרצת המודל הבסיסי?
הממשק עוטף את המודל ברכיבי גרפיקה של Gradio ומאפשר ציור ידני של מסכות על גבי התמונה. הוא חוסך כתיבת קוד ומציג סליידרים מוכנים לקביעת עוצמת השינוי ומספר צעדי החישוב.
איך משתמשים
טוענים תמונה, מסמנים אזור אם רוצים, מקלידים פרומפט ולוחצים על שליחה. האפליקציה רצה על מעבד גרפי מדגם zero-a10g שמקצה משאבים לפי דרישה, מה שמאפשר עיבוד מהיר ברגע שההפעלה זמינה. נכון לעכשיו היא נמצאת במצב שגיאת ריצה, כך שאי אפשר לייצר דרכה תוצאות בדפדפן עד שהמפתח יתקן את הקוד.
הרישיון
הרישיון מוגדר כ־other, כלומר אין רישיון קוד פתוח סטנדרטי מוצהר. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצרים, ומומלץ לבדוק את תנאי המודל הספציפי BleachNick/SD3_UltraEdit_w_mask לפני שמשתמשים בו.