FitDiT — הדגמה

מה זה

אתם מעלים תמונת דוגמן ותמונת פריט לבוש בנפרד, ובוחרים קטגוריה מתאימה: חלק עליון, חלק תחתון או שמלות. אפשר להשתמש בתמונות מוכנות מתוך המאגר המובנה של הדוגמאות בעמוד כדי לראות איך זה עובד בלי להעלות קבצים אישיים.

מאחורי הקלעים רץ שילוב של מודלי שפה ותמונה מסוג Stable Diffusion 3 יחד עם שני מקודדי ראייה מבוססי CLIP, אחד של OpenAI והשני של LAION. העיבוד עצמו משתמש במודל DWPose לחילוץ תנוחת הגוף ובאלגוריתם human parsing כדי לאתר את חלקי הגוף ולבודד את אזור הבגד המקורי.

מתאים ל

• הדמיית קטלוג

  בדיקה מוקדמת של התאמת פריטי לבוש על דוגמנים בלי צורך בהפקת ימי צילום מלאים.

• מדידה אישית

  העלאת תמונת גוף עצמית ובחינה של חולצה או שמלה לפני רכישה בחנות רשת.

• בדיקת גזרות בעיצוב

  בחינה ויזואלית מהירה של התאמת בגד גזור לגוף במגוון תנוחות עמידה שונות.

איפה זה נופל

אם התנוחה בתמונת המקור מורכבת מדי, זיהוי המפרקים עלול לפספס ולגרור תוצאה מרוחה. מעבר לכך, התהליך אינו אוטומטי לגמרי, ולעיתים קרובות תצטרכו לתקן את המסכה ידנית בעזרת מחווני ההיסט או המברשת כדי למנוע זליגה של הבגד לרקע. הדגמת הדפדפן מוגבלת לשלושים צעדי ריצה בלבד, ולכן בדיקות ברזולוציות הגבוהות עשויות לסבול מאיבוד פרטים עדינים במרקם הבד.

איך מריצים

התהליך מחולק לשני שלבים. קודם כל לוחצים על כפתור יצירת המסכה, ומקבלים מפת אזור שאפשר לתקן ידנית באמצעות מברשת והזזת גבולות. לאחר מכן לוחצים על כפתור ההלבשה ומחכים לתוצאה בגלריה. הממשק פועל ישירות בדפדפן בלי צורך בחשבון או בהתחברות. הוא רץ על חומרת A10G שמוקצית לפי דרישה, כך שזמני ההמתנה תלויים בעומס הכללי על השרת וברזולוציה שנבחרה, שמגיעה עד 1536 על 2048.

pip install -U huggingface_hub
hf download BoyuanJiang/FitDiT

הקבצים

18 קבצים במאגר, 8.1 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• transformer_vton/diffusion_pytorch_model.safetensors3.8 GB
• transformer_garm/diffusion_pytorch_model.safetensors3.8 GB
• humanparsing/parsing_lip.onnx266.9 MB
• humanparsing/parsing_atr.onnx266.9 MB
• dwpose/yolox_l.onnx216.7 MB
• vae/diffusion_pytorch_model.safetensors167.7 MB
• dwpose/dw-ll_ucoco_384.onnx134.4 MB
• pose_guider/diffusion_pytorch_model.bin10.3 MB
• resource/img/teaser.jpg2.0 MB
• resource/img/manually_adjust.jpg558.9 KB
• resource/img/mask_offset.jpg320.5 KB
• README.md5.8 KB
• .gitattributes1.6 KB
• vae/config.json739 B
• model_index.json545 B
• transformer_garm/config.json390 B
• transformer_vton/config.json390 B
• scheduler/scheduler_config.json141 B

הרישיון

הפרויקט מפורסם תחת רישיון cc-by-nc-sa-4.0. המשמעות היא שהשימוש מוגבל למטרות לא מסחריות בלבד, וכל נגזרת שלו מחייבת שיתוף באותם תנאים. בעלי חנויות מקוונות לא יכולים לשלב אותו בשירות פעיל ללא הסדרה נפרדת.

• שינוי הקוד
• חובת ייחוס
• שימוש מסחרי: לא

הרישיון המלא בעמוד המודל ↗