GPT
C

ControlNet-with-Anything-v4

רץ בדפדפן

hystsmit2023-02-16

  • gradio

הכלי מחבר בין מודלי הבקרה של ControlNet למודל האיור Anything v4.0. הוא מיועד למי שרוצה לייצר דמויות בסגנון אנימה תוך שליטה מדויקת בפוזה, בקווים או בעומק.

  • הורדות בחודש
  • 306לייקים

מה זה

אתם מעלים תמונת מקור או משרבטים ישירות בממשק, בוחרים לשונית בקרה ומקבלים איור חדש בסגנון אנימה שתואם למבנה המקורי. המערכת מחלקת את העבודה לפי טכניקות שונות, ביניהן זיהוי קצוות כמו Canny ו־HED, מפות עומק, שרבוט ידני, זיהוי שלד תנועה עם OpenPose ומפות נורמלים.

מאחורי הקלעים רצים מודלי ControlNet השונים שמתרגמים את נתוני התמונה הגולמיים להנחיות גיאומטריות. ההנחיות האלה מועברות ישירות אל מודל הבסיס Anything v4.0 שמייצר את התוצאה הסופית המצוירת לפי הפרומפט והקלט הוויזואלי.

מתאים ל

  • העתקת פוזות לאיורי אנימה

    מעלים צילום של אדם ומייצרים דמות אנימה באותה תנוחה מדויקת בעזרת לשונית ה־Pose.

  • הפיכת שרבוט לאיור גמור

    מציירים סקיצה פשוטה בלשונית Scribble ומקבלים ציור מלא שמבוסס על הקווים הגולמיים.

  • שמירה על קומפוזיציה ועומק

    משתמשים בלשוניות Canny או Depth כדי להלביש סגנון חדש על מבנה קיים בלי לאבד פרופורציות.

איפה זה נופל

הבעיה המיידית היא שהיישום לא עובד כרגע וזורק שגיאת ריצה בעלייה. מעבר לזה, הקוד חוסם במפורש החלפה של מודל הבסיס בסביבה הזו, כך שאתם תקועים רק עם Anything v4.0. גם אם הוא יחזור לפעול, הרצה של מודלי תמונה כבדים על מעבד רגיל תגרום לכל יצירה להימשך דקות ארוכות.

שאלות
נפוצות

האם השימוש עולה כסף?

הגישה פתוחה לגמרי בחינם בדפדפן. אין צורך לשלם על מנוי או להזין פרטי אשראי.

למה מופיעה שגיאה כשאני מנסה לייצר תמונה?

הסביבה נמצאת כרגע במצב של שגיאת ריצה ולא נטענת בהצלחה על השרת. עד שהיוצר לא יתקן את הקוד, אי אפשר להריץ אותה בדפדפן.

האם אפשר להריץ את זה על המחשב שלי?

כן, הקוד משתמש ברישיון MIT ומבוסס על מודלים ציבוריים. אפשר להוריד את הקבצים ולהריץ אותם מקומית, רצוי עם כרטיס מסך מתאים.

האם אפשר להחליף את מודל האנימה במודל אחר?

בקוד של הדף הספציפי הזה האפשרות להחליף את מודל הבסיס נחסמה במכוון. כדי להשתמש במודל אחר תצטרכו לשכפל את הקוד ולהריץ אותו באופן עצמאי.

איך משתמשים

נכנסים לדפדפן, בוחרים באחת הלשוניות כמו Pose, Depth או Scribble, מעלים תמונה ולוחצים על כפתור ההרצה. לא צריך חשבון מיוחד כדי לראות את הממשק. עם זאת, היישום מוגדר על מעבד בסיסי בלבד ללא מאיץ גרפי, ובפועל הוא נמצא כרגע במצב של שגיאת ריצה. כל עוד השרת קרס, אי אפשר להפיק דרכו תמונות ישירות.

הרישיון

הקוד מפורסם תחת רישיון MIT הפתוח והמתירני. הרישיון מכסה את קוד הממשק בלבד, ולא מגדיר בעלות על התמונות שאתם מעלים או התוצרים שנוצרים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗