חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
S

StableVITON

רץ בדפדפן

rlawjdghekcc-by-nc-sa-4.02024-03-26

  • gradio

הכלי מיועד להלבשה וירטואלית של בגדים על תמונות של אנשים. הוא מתאים למי שרוצה לבדוק התאמת בגד לגוף בלי למדוד פיזית.

  • —הורדות בחודש
  • 56לייקים

מה זה

אתם מעלים שתי תמונות, אחת של אדם והשנייה של פריט לבוש, ומקבלים תמונה חדשה של אותו אדם לבוש בבגד שנבחר. הממשק כולל מאגר של 14 דוגמאות מובנות של דוגמנים ו־14 דוגמאות של בגדים, כך שאפשר לנסות שילובים ישירות מתוכם בלי להעלות קבצים מהמחשב.

מאחורי הקלעים רץ תהליך שמשלב עיבוד מקדים כבד עם מודל דיפוזיה. הקוד טוען ספריות של DensePose, Human Parsing ו־OpenPose כדי לזהות את תנוחת הגוף, חלקי הלבוש הקיימים והמבנה המדויק של המצולם. לאחר מכן, מודל StableVITON לצד רכיבי CLIP ו־T5 מייצר את התוצאה הסופית באמצעות דוגם PLMS ושומר על קווי המתאר והטקסטורה של הבגד.

מתאים ל

  • מדידה וירטואלית לבגדים

    הדבקה של חולצה או שמלה על תמונת גוף מלא כדי לראות איך הגזרה יושבת.

  • בדיקת שילובי אופנה

    החלפת פריטי לבוש על דוגמנים קיימים מתוך המאגר המובנה כדי לבחון התאמה.

  • בדיקת יכולות עיבוד תמונה

    בחינה של שילוב מודלי DensePose ו־OpenPose עם מודל דיפוזיה להלבשה.

איפה זה נופל

הבעיה המרכזית כרגע היא שהעמוד במצב שגיאה מוחלט ולא מאפשר הרצה. מעבר לזה, המודל תלוי לחלוטין בזיהוי תנוחה נכון דרך DensePose ו־OpenPose. אם התמונה שלכם בזווית חריגה, בתאורה בעייתית או שהבגד מקופל, הניתוח המקדים ייכשל והתוצאה תיראה מרוחה ולא אמינה.

שאלות
נפוצות

האם הכלי עובד עכשיו בדפדפן?

לא, נכון לעכשיו הוא מוגדר במצב שגיאת קונפיגורציה. אי אפשר להריץ בו תמונות ישירות מהרשת עד שמי שהעלה אותו יתקן את ההגדרות. תצטרכו להמתין לעדכון או להוריד את הקוד למחשב שלכם.

האם השימוש באפליקציה עולה כסף?

האפליקציה פתוחה בחינם באתר ללא צורך בתשלום. עם זאת, הרישיון שלה אוסר שימוש מסחרי מכל סוג שהוא. אם אתם מתכננים לשלב אותה בחנות מקוונת, הרישיון הנוכחי לא מתיר זאת.

מה קורה עם התמונות שמעלים לממשק?

הקבצים מועברים לשרת שמריץ את חומרת ה־A10G לצורך עיבוד התמונה. אין הצהרת פרטיות ייעודית של היוצר לגבי שמירה או מחיקה שלהם. לכן עדיף לא להעלות תמונות פרטיות שאינכם רוצים שיישארו על שרתים מרוחקים.

אפשר להריץ את זה באופן עצמאי על המחשב?

כן, הקוד מסתמך על מודלים ציבוריים וספריות מוכרות שזמינות להורדה. תצטרכו כרטיס מסך חזק כדי להריץ את DensePose, T5 ומודל הדיפוזיה יחד. התקנת כל התלויות המוקדמות דורשת ידע טכני בסביבות פייתון.

איך משתמשים

לוחצים על כפתור Run ומחכים. בממשק אפשר לכוון את מספר שלבי הדיפוזיה בין 10 ל־50, כאשר ברירת המחדל עומדת על 20 צעדים, ויש גם תיבת סימון לדוגמן מותאם אישית. האפליקציה מוגדרת לרוץ על חומרת zero-a10g, אבל כרגע היא במצב שגיאת קונפיגורציה ולא מתחילה לפעול בדפדפן.

הרישיון

הקוד והמודל מופצים תחת רישיון cc-by-nc-sa-4.0. המשמעות היא שהשימוש מוגבל למטרות לא מסחריות בלבד, וכל נגזרת חייבת להישאר תחת אותו רישיון. אין התייחסות מפורשת בקוד לשמירת התמונות שאתם מעלים ברשת.

  • שינוי הקוד
  • חובת ייחוס
  • שימוש מסחרי: לא

הרישיון המלא ב־Hugging Face ↗