Leffa — הדגמה

קוד פתוח

franciszzjmit2024-12-10

gradio

הכלי מייצר תמונות של אנשים ומאפשר להחליף להם בגדים או לשנות להם תנוחה. הוא מיועד למפתחים, מעצבים ומי שרוצה לבדוק התאמת בגדים וירטואלית על דוגמנים.

34.3 GBמשקל הקבצים
—הורדות בחודש
623לייקים

מה זה

אתם מעלים תמונת אדם ותמונת בגד כדי להלביש אותו מחדש, או תמונת אדם ותמונת מקור נוספת עם תנוחה מסוימת כדי להעתיק את היציבה. התוצר הוא תמונה חדשה שבה האדם לובש את הבגד המבוקש או עומד בתנוחה שנבחרה, תוך שמירה על תווי הפנים ומרקם הבד.

מאחורי הקלעים רצה שיטת Leffa על גבי מודל דיפוזיה, לצד מודלים חיצוניים של SCHP למסכות ו־DensePose למיפוי הגוף. השיטה משתמשת בשדות זרימה בתוך שכבות תשומת הלב כדי להדביק את הטקסטורה של הבגד בדיוק איפה שצריך, בלי עיוותים של הדפסים וקפלים. הממשק כולל דוגמאות מובנות של אנשים ובגדים, ומציע אפשרויות מתקדמות כמו בחירת סוג בגד, צעדי דיפוזיה, סיד, והצגת מסכות הניפוי.

מתאים ל

הלבשה וירטואלית לבגדים
מעלים תמונת אדם ותמונת בגד מהאתר, ומקבלים תמונה של האדם לבוש בו לבדיקת התאמה מהירה.
החלפת תנוחה לדוגמנים
לוקחים תמונת גוף קיימת ומעבירים אותה לתנוחה חדשה לחלוטין באמצעות תמונת שלד מכוונת.
בדיקת מסכות ומיפוי גוף
פותחים את חלונית הדיבאג כדי לראות איך המודל חותך את הגוף ומזהה את חלקי הבגד.

איפה זה נופל

הכלי מתקשה כשהתמונות של האדם או הבגד מכילות זוויות קיצוניות, תאורה חלשה או תנוחות מורכבות שמבלבלות את DensePose. בנוסף, חומרת הדמו היא A10G, ולכן הביצועים בפועל אטיים יותר מקצב של שש שניות שמדווח על גבי A100. כדאי לזכור שדיפוזיה עדיין נוטה לעיתים לטשטש לוגואים עדינים או כיתובים קטנים מאוד על הבדים.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

האפליקציה פתוחה לשימוש חופשי לגמרי בדפדפן. אין צורך לשלם או להזין פרטי אשראי כדי לנסות אותה. היא נתמכת על ידי שרת ציבורי של Hugging Face.

כמה זמן לוקח לייצר תמונה?

זמן הייצור אורך בדרך כלל בין מספר שניות לחצי דקה. אם השרת היה כבוי, ייקח לו עוד כחצי דקה להתעורר. המהירות מושפעת גם ממספר הצעדים שתגדירו באפשרויות המתקדמות.

האם אפשר להריץ את המערכת על המחשב שלי?

כן, הקוד פתוח תחת רישיון MIT וזמין בגיטהאב. תצטרכו סביבת פייתון מותקנת ומעבד גרפי תואם כדי להריץ אותו עצמאית. קיים גם שילוב רשמי למי שמשתמש ב־ComfyUI.

מה קורה עם התמונות שאני מעלה?

התמונות נשלחות לשרת שמריץ את ה־Space ונמחקות מהזיכרון הזמני עם סיום ההרצה או אתחול המכונה. עם זאת, לא מומלץ להעלות לשם תמונות פרטיות או רגישות. לשימוש בטוח במידע רגיש עדיף להריץ את הקוד מקומית.

איך מריצים

בוחרים לשונית של מדידת בגדים או שינוי תנוחה, מעלים שתי תמונות ולוחצים על כפתור הייצור. אין צורך בהרשמה, והממשק פתוח בדפדפן. החומרה שמוקצית להרצה היא כרטיס מסך מסוג A10G שמופעל לפי דרישה. ייתכן שתחכו כמה שניות לעליית הכרטיס אם הוא ישן, וזמן העיבוד עצמו לוקח מספר שניות לכל תמונה בגלל חישובי הדיפוזיה ועיבוד המסכות המקדים.

pip install -U huggingface_hub
hf download franciszzj/Leffa

הקבצים

37 קבצים במאגר, 34.3 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הקוד והפרויקט מפורסמים תחת רישיון MIT, מה שמאפשר שימוש חופשי כולל שימוש מסחרי והתאמה אישית. התמונות שאתם מעלים עוברות עיבוד בשרת של Hugging Face Spaces לפי תנאי השימוש הרגילים של השרת.

שימוש מסחרי
שינוי הקוד
הפצה מחדש

הרישיון המלא בעמוד המודל ↗