MasaCtrl
רץ בדפדפןTencentARCרישיון לא דווח2023-04-27
עריכת תמונות קיימות ויצירת רצף תמונות עקבי בעזרת מודלי דיפוזיה שונים. הכלי מתאים לחוקרים ומפתחים שרוצים לבדוק שליטה באובייקטים בלי לאבד את המאפיינים שלהם.
- —הורדות בחודש
- 42לייקים
מה זה
אתם בוחרים מודל מתוך תפריט נפתח שמכיל את גרסאות 1.4 ו־1.5 של Stable Diffusion לצד Anything v4 ואת MasaCtrl עצמו. הממשק מחולק לשתי לשוניות עיקריות, האחת מיועדת ליצירת תמונות עקביות והשנייה לעריכת תמונות אמיתיות שאתם מזינים פנימה.
מאחורי הקלעים הקוד מריץ את MasaCtrlPipeline עם מתזמן מסוג DDIMScheduler ומתערב ישירות במנגנוני תשומת הלב של המודל. במקום לייצר תמונה מחדש ולנחש את הפרטים, הוא משמר עוגנים מהתמונה המקורית כדי לשנות רק את הפעולה או המיקום של האובייקט.
מתאים ל
- עריכת תמונות אמיתיות
העלאת תמונה קיימת ושינוי התנוחה או הפרטים של האובייקט בלשונית העריכה.
- יצירה עקבית מטקסט
הפקת רצף תמונות עם אותה דמות בכמה תנוחות שונות דרך לשונית היצירה.
- השוואת מודלי בסיס
בדיקת התנהגות מנגנון השליטה על גבי Anything v4 מול גרסאות שונות של SD.
איפה זה נופל
הבעיה המיידית היא שהאפליקציה פשוט קרסה בשרת ולא פועלת כרגע. מעבר לזה, חומרה של כרטיס בודד מסוג זה עלולה להיות איטית בעבודה עם תמונות אמיתיות, ותמיכה בטקסט בעברית לא קיימת במודלי הבסיס הישנים האלה.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה כרגע?
לא דרך הדפדפן. המרחב נמצא במצב של שגיאת ריצה ולא נטען כמו שצריך על גבי השרת.
האם הכלי עולה כסף?
הגישה לממשק באתר היא בחינם ואינה דורשת תשלום. כל עוד הוא לא עובד שם, תצטרכו להוריד את הקוד ולהריץ אותו על מחשב או שרת משלכם.
האם אפשר להריץ את זה מקומית?
כן, הקוד מבוסס על ספריות סטנדרטיות כמו diffusers ו־pytorch-lightning. אפשר למשוך את הקבצים ולהפעיל אותם בסביבה עם כרטיס מסך מתאים.
מה קורה עם התמונות שמעלים לממשק?
מכיוון שהרישיון ותנאי השימוש לא צוינו במפורש, התמונות עוברות דרך שרתי השירות שבו מתארח הקוד. מומלץ לא להעלות חומרים פרטיים או רגישים.
איך משתמשים
הממשק בנוי בגרדיו ויושב על מעבד גרפי a10g-small, אבל נכון לעכשיו הוא נמצא במצב שגיאת ריצה כך שאי אפשר להפעיל אותו ישירות בדפדפן. במצב תקין פשוט בוחרים מודל, עוברים ללשונית הרצויה, מזינים פרומפט או מעלים קובץ ולוחצים על הפעלה.
הרישיון
הרישיון של המרחב הזה לא דווח. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצרים, וכדאי לבדוק את הרישיונות המקוריים של המודלים הנטענים כמו SD 1.4 ו־1.5 לפני שמשתמשים בהם.