RamAnanth1/ControlNet
רץ בדפדפןRamAnanth1רישיון לא דווח2023-02-11
הדגמת רשת שמייצרת תמונות לפי תנוחת גוף מתמונת מקור בעזרת הנחיית טקסט. הכלי מתאים למי שרוצה לבדוק שליטה ביציבה בלי להגדיר סביבה מקומית.
- —הורדות בחודש
- 116לייקים
מה זה
מעלים תמונה של אדם וכותבים תיאור טקסטואלי של מה שרוצים לראות. הקוד מפעיל מודל זיהוי שלדים של Openpose כדי לחלץ את תנוחת הגוף, ומעביר את התוצאה למודל ControlNet יחד עם Stable Diffusion בגרסה 1.5 כדי לייצר תמונה חדשה ששומרת על אותה יציבה בדיוק.
בקוד המקורי יש הכנה למודל קווי מתאר של Canny ובחירה במשימות שליטה נוספות כמו שרבוט, אבל השורות האלו מנוטרלות בהערה. בפועל מה שמחובר להרצה הוא רק זיהוי תנוחה. גלריית הפלט מציגה את התוצאות הסופיות לצד רשימת דוגמאות מוכנות מראש שמגיעות עם הממשק כדי לבדוק את התהליך בלי להעלות קובץ משלכם.
מתאים ל
- שחזור תנוחת גוף בתמונה
מעלים צילום עם יציבה מורכבת ומייצרים דמות חדשה לגמרי ששומרת על אותה העמדה.
- בדיקת שילוב מודלים
בוחנים איך Openpose מתממשק עם סטייבל דיפיוז'ן 1.5 ומייצר תמונות על פי פרומפט.
- שכפול קוד לבנייה עצמית
משתמשים בקוד המקור כבסיס להרמת שרת פרטי עם תמיכה בזיהוי קווי מתאר.
איפה זה נופל
החיסרון הברור ביותר הוא שהיישום כרגע שבור לחלוטין ומחזיר שגיאה. מעבר לכך, הממשק לא מאפשר שליטה בפרמטרים בסיסיים כמו מספר צעדי הדגימה או עוצמת ההשפעה של השלד, ואי אפשר לבחור במשימות שליטה אחרות כמו שרבוט או זיהוי עומק למרות שהן מופיעות בהערות הקוד. אם הדמות בתמונה יושבת בזווית מוזרה או מוסתרת, זיהוי התנוחה יפספס והפלט ייצא מעוות.
שאלות
נפוצות
האם השימוש פתוח בחינם?
הגישה לעמוד חופשית לחלוטין ואין צורך בתשלום או בהרשמה. עם זאת, המערכת מדווחת על שגיאת ריצה ולכן לא ניתן להשתמש בה בפועל כרגע.
האם אפשר להריץ את זה על המחשב?
אפשר להוריד את קוד המקור ולהריץ אותו בסביבה מקומית עם מעבד גרפי מתאים. תצטרכו להתקין את הספריות הדרושות, להוריד את המשקלים של סטייבל דיפיוז'ן וקונטרול-נט, ולתקן את שגיאות הטעינה שבקוד.
מה קורה לקבצים שמעלים לממשק?
התמונות נשלחות לשרת שמריץ את חומרת העיבוד לצורך יצירת השלד והתמונה החדשה. מאחר שאין הצהרת פרטיות או רישיון מסודר, לא כדאי להעלות לשם תמונות רגישות או פרטיות.
איך משתמשים
הממשק מבוסס על עמודה להעלאת תמונה, שדה טקסט לפרומפט וכפתור הפעלה שמכניס את הבקשה לתור. החומרה שמוקצית לו היא מאיץ מסוג A10G, כך שהרצה תקינה אמורה לקחת שניות בודדות לתמונה בלי צורך ברישום מראש. יחד עם זאת, כרגע האפליקציה נמצאת במצב שגיאת ריצה, ולכן אי אפשר להפיק בה תמונות ישירות בדפדפן בלי לשכפל את הקוד ולתקן אותו.
הרישיון
היוצר לא ציין רישיון שימוש עבור היישום. בהיעדר רישיון מוגדר, אין הרשאה משפטית ברורה לשימוש מסחרי בקוד או בפלטים, ולא ידוע באילו תנאים נשמרות התמונות שמעלים לשרת.