חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
I

IMAGDressing-v1

רץ בדפדפן

feishen29apache-2.02024-07-24

  • gradio

הדגמה להלבשה וירטואלית שמרכיבה בגד, פנים ותנוחה לתוך תמונה חדשה בעזרת בינה מלאכותית. היא מיועדת ליוצרי תוכן, מעצבים ואנשי מסחר אלקטרוני שרוצים לראות בגד על דוגמן בלי לצלם בפועל.

  • —הורדות בחודש
  • 73לייקים

מה זה

מעלים תמונה של בגד, וזה הקלט היחיד שחובה לספק. לצידו אפשר לסמן צ'קבוקס ולהעלות תמונת פנים לשמירה על זהות מסוימת, וכן תמונה נוספת שממנה נלקחת תנוחת הגוף. בממשק יש גם תיבת טקסט לתיאור כללי של הדמות והסצנה, כמו אישה יפה בחולצה קצרה, יחד עם דוגמאות מובנות של בגדים, פנים ותנוחות שמאפשרות לבדוק את התהליך בלי להעלות קבצים מהמחשב.

מאחורי הקלעים רץ שילוב כבד של מודלים. הבסיס הוא Realistic Vision V4 שמייצר את התמונה הריאליסטית, לצד IP-Adapter שמנתח את מאפייני התמונה, OpenPose שמחלץ את מנח הגוף באמצעות ControlNet, ורכיב ייעודי בשם IMAGDressing שמתאם את הבגד לגוף. זיהוי הפנים מתבצע עם InsightFace, ויש אפשרות לכוונן בהגדרות המתקדמות את רמת ההשפעה של הבגד, הפנים, הפרומפט ומשקלי ה־LoRA.

מתאים ל

  • הדמיית בגדים על דוגמנים

    מלבישים פריטי לבוש מחנויות אונליין על מודלים שונים בלי צורך בהפקות צילום יקרות.

  • שמירה על זהות ותנוחה

    מייצרים תמונות אופנה של אותם פנים בדיוק בכמה זוויות ותנוחות גוף מוגדרות מראש.

  • בדיקת שילובי סטיילינג

    בוחנים איך גזרות ועיצובים שונים נראים על מבנה גוף מסוים בעזרת תיאור טקסטואלי חופשי.

איפה זה נופל

הבעיה המרכזית היא שהחלל כרגע שבור לחלוטין ומחזיר שגיאת הפעלה, כך שאי אפשר לייצר בו תמונות ישירות דרך האתר. מעבר לזה, המודל מחייב זיהוי פנים ברור ואם התמונה לא מספיק חדה הוא זורק שגיאה ומבקש פורטרט אחר. שילוב בין כל כך הרבה מתאמים שונים גם גורם לעיתים קרובות לחוסר עקביות בטקסטורות מורכבות של בגדים או לעיוותים בחיבור שבין הצוואר לגוף.

שאלות
נפוצות

האם השימוש בהדגמה עולה כסף?

לא, הגישה דרך הדפדפן היא חינמית לחלוטין. כל עוד השרת פעיל אין תשלום על זמן העיבוד או על כמות התמונות.

למה מופיעה שגיאה כשאני מנסה להשתמש בה?

האפליקציה נמצאת כרגע במצב של שגיאת ריצה בצד השרת. הקוד קרס בעת הטעינה והמפתח צריך לעדכן אותו כדי שיחזור לפעול.

האם אפשר להריץ את זה על המחשב שלי?

כן, הקוד והמשקלים פתוחים תחת רישיון Apache 2.0. תצטרכו מחשב חזק עם כרטיס מסך מודרני כדי להריץ את שרשרת המודלים הזו באופן עצמאי.

מה קורה לתמונות שאני מעלה לכאן?

התמונות נשלחות לזיכרון של השרת לצורך יצירת התמונה בלבד. אין בממשק כפתור שמירה או שיתוף פומבי, אך הן עוברות דרך שרתי הענן שמארחים את ההדגמה.

איך משתמשים

לוחצים על כפתור ההלבשה וממתינים. ברירת המחדל מריצה את החישובים על מעבד גרפי מסוג A10G, אבל נכון לעכשיו אי אפשר באמת להריץ את העיבוד בדפדפן כי ההדגמה נמצאת במצב של שגיאת ריצה. כשהסביבה תקינה, אין צורך להירשם או לשלם, והמערכת משתמשת בתור הרגיל של פלטפורמת הריצה לחלוקת זמני מחשוב.

הרישיון

הפרויקט מפורסם תחת רישיון קוד פתוח מסוג Apache 2.0 שמתיר שימוש חופשי ושינוי של הקוד. עם זאת, התוצרים והתמונות שאתם מעלים כפופים גם למגבלות של מודלי הבסיס כמו Realistic Vision ו־InsightFace, שלא תמיד מאפשרים שימוש מסחרי בלתי מוגבל.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗