CatVTON — הדגמה
קוד פתוחzhengchongcc-by-nc-sa-4.02024-08-05
הלבשת בגדים וירטואלית על גבי תמונות של אנשים. מיועד למי שרוצה לבדוק התאמת פריטי לבוש על דוגמנים בלי לצלם אותם מחדש.
- 1.3 GBמשקל הקבצים
- —הורדות בחודש
- 216לייקים
מה זה
מעלים תמונה של אדם ותמונה נפרדת של בגד, בוחרים את סוג הבגד ומקבלים תמונה חדשה שבה האדם לובש את הפריט המבוקש. הממשק כולל עורך תמונה שמאפשר גם למחוק ידנית אזורים או להסתמך על חיתוך מסיכה אוטומטי של אזור הלבוש.
מאחורי הקלעים פועלים שני צינורות עבודה נפרדים לבחירה. האחד משלב את CatVTON עם מודל הציור מחדש של Stable Diffusion 1.5, והשני משתמש במודל הכבד יותר FLUX.1 Fill Dev. שניהם נעזרים במערכת מיסוך פנימית כדי להתאים את הבגד בדיוק לקווי הגוף.
למי שרוצה לבדוק את הביצועים מיד, הממשק מציע דוגמאות מוכנות של גברים ונשים שנלקחו מתוך פרויקטים כמו OOTDiffusion ו־OutfitAnyone, לצד תמונות בגדים עליונים ובגדים מלאים שנאספו מהאינטרנט.
מתאים ל
- הדמיית בגדים על דוגמנים
החלפת חולצות או שמלות על תמונות קיימות של אנשים לצורך המחשה מוקדמת.
- השוואת מודלים להלבשה
בדיקת ההבדלים באיכות ובמהירות בין SD 1.5 לבין FLUX.1 Fill.
- בדיקת מסיכות לבוש
בחינת יכולות החיתוך והמיסוך האוטומטיות של פריטי אופנה שונים.
איפה זה נופל
הצלחת התוצאה תלויה בדיוק המסיכה על הגוף. אם הבגד המקורי מורכב או שהתנוחה חריגה, עיוותים באזור החיבור שבין הבד לעור שכיחים למדי. בנוסף, דוגמאות ברירת המחדל נלקחו מהדגמות מוצלחות של פרויקטים מובילים, כך שהן עשויות להציג תוצאות נקיות יותר מאשר תמונות רגילות מהטלפון.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
השימוש בדפדפן חופשי לחלוטין ואינו דורש תשלום. כל המודלים והחומרה מסופקים ישירות דרך סביבת העבודה. אין צורך להזין אמצעי תשלום כדי להריץ בדיקות.
כמה זמן לוקח לכל תמונה להיווצר?
זמן היצירה משתנה לפי הלשונית שנבחרה בממשק. בלשונית של Stable Diffusion 1.5 הריצה זריזה יחסית הודות לכרטיס ה־A10G. לעומת זאת, שימוש במודל FLUX.1 Fill Dev דורש משאבי מחשוב כבדים בהרבה ולכן הוא איטי יותר.
האם אפשר להשתמש בתוצאות בחנות אונליין מסחרית?
לא, הרישיון המוצהר הוא CC BY-NC-SA 4.0 שאוסר שימוש מסחרי מכל סוג. הכלי מוגבל לשימושים ניסיוניים, מחקריים או פרטיים בלבד. שימוש מסחרי בקוד או בפלט מפר את תנאי הרישיון.
במה הממשק הזה שונה מהרצת המודל לבד?
הממשק עוטף את המודל הגולמי ומאפשר עבודה גרפית נוחה בלי לכתוב שורות קוד. הוא מחבר אוטומטית בין יצירת המסיכות, עיבוד התמונה וצינורות היצירה השונים. בנוסף, מקבלים גישה ישירה לחומרה מבוססת ענן בלי צורך בהתקנות מקומיות.
איך מריצים
בוחרים לשונית לפי המודל הרצוי, מעלים תמונת אדם ותמונת בגד, מסמנים את סוג הלבוש ולוחצים על כפתור השליחה. אפשר לפתוח אפשרויות מתקדמות כדי לשנות את מספר צעדי היצירה, את מידת ההיצמדות להנחיה או את הסיד לקבלת תוצאה עקבית.
העיבוד רץ על מעבד גרפי מדגם A10G בסביבת Zero. חומרה כזו מציגה זמני ריצה מהירים למדי עבור SD 1.5, אבל תהליך הציור מחדש דרך FLUX דורש משאבים משמעותיים יותר ועשוי לקחת זמן רב יותר לכל יצירה.
pip install -U huggingface_hub hf download zhengchong/CatVTON
הקבצים
12 קבצים במאגר, 1.3 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
- SCHP/exp-schp-201908261155-lip.pth267.4 MB
- SCHP/exp-schp-201908301523-atr.pth267.4 MB
- DensePose/model_final_162be9.pkl255.8 MB
- dresscode-16k-512/attention/model.safetensors198.3 MB
- mix-48k-1024/attention/model.safetensors198.3 MB
- vitonhd-16k-512/attention/model.safetensors198.3 MB
- flux-lora/pytorch_lora_weights.safetensors37.4 MB
- README.md9.7 KB
- .gitattributes1.5 KB
- DensePose/Base-DensePose-RCNN-FPN.yaml1.5 KB
- DensePose/densepose_rcnn_R_50_FPN_s1x.yaml182 B
- config.json0 B
הרישיון
הרישיון הוא CC BY-NC-SA 4.0. המשמעות היא שהקוד וההדגמה מיועדים למחקר ולשימוש אישי בלבד, ואסור להשתמש בהם ליישום מסחרי או בחנויות אופנה פעילות. כל תוצר או פיתוח שמבוסס עליהם חייב להישאר תחת אותו רישיון שיתופי.
- שינוי הקוד
- חובת ייחוס
- שימוש מסחרי: לא