hysts/ControlNet-v1-1

מה זה

מעלים תמונת מקור או משרבטים ישירות על המסך, בוחרים מודל מנחה, ומקבלים תמונה חדשה שנשענת על המבנה המקורי. הממשק מחולק ללשוניות לפי סוג העיבוד: זיהוי קצוות כמו Canny או SoftEdge, שרטוטי קווים, ציור חופשי, חילוץ עומק, מפות נורמלים, נקודות שלד של גוף אדם עם OpenPose, חלוקה למקטעים, ערבוב תוכן, ועריכה טקסטואלית ישירה דרך Instruct Pix2Pix.

מאחורי הקלעים רצים המודלים של ControlNet 1.1 בשילוב מעבדי תמונה מקדימים של Annotators. יש כאן גם אפשרות לבדוק מהו מודל הבסיס שנטען ואף שדה להחלפת מודל הבסיס, אם ההגדרה במערכת מאפשרת זאת.

מתאים ל

• שמירה על תנוחת גוף

  חילוץ שלד אנושי מתמונה קיימת ויצירת דמות חדשה לגמרי באותה התנוחה בדיוק.

• הפיכת שרבוט לתמונה

  ציור קווי מתאר מהירים ביד חופשית והפיכתם לאיור מפורט לפי הנחיית טקסט.

• שחזור סצנה לפי עומק

  שימוש במפת עומק או נורמלים כדי להחליף חומרים ותאורה בלי לאבד את המרחב.

• דיוק גיאומטרי במבנים

  זיהוי קווים ישרים באמצעות MLSD לצורך יצירה של חללים אדריכליים יציבים.

איפה זה נופל

הבעיה המרכזית כרגע היא שהאפליקציה נמצאת בסטטוס שגיאת בנייה, ולכן היא לא תפעל בדפדפן עד שהמפתח יתקן את ההתקנה. מעבר לכך, כל המודלים כאן מבוססים על גרסת SD 1.5 הישנה יחסית, כך שאיכות הפירוט מוגבלת לעומת מודלים מודרניים יותר. אם המנהל חסם את האפשרות להחליף מודל בסיס, אתם תקועים עם ברירת המחדל.

איך משתמשים

בוחרים את הלשונית של הטכניקה שרוצים לבדוק, מעלים את קובץ התמונה או מציירים בלוח, מזינים הנחיה טקסטואלית ולוחצים על הפעלה. המערכת מוגדרת לרוץ על מאיץ גרפי בודד מסוג L4, חומרה שמספקת בדרך כלל מענה תוך שניות בודדות לכל תמונה.

כרגע אין צורך להתחבר או להירשם כדי לנסות את הממשק הציבורי. עם זאת, קיים כפתור שכפול שמאפשר להעתיק את כל הקוד וההגדרות לסביבה פרטית משלכם.

הרישיון

הפרויקט מופץ תחת רישיון MIT פתוח ומתירני, שמאפשר שימוש, שינוי והפצה חופשיים של הקוד. לגבי התמונות שאתם מעלים או התוצאות שנוצרות, הזכויות תלויות ברישיונות של מודלי המשקל של ControlNet ושל מודל הבסיס שנטען.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗