StableDelight

מה זה

מעלים לכאן תמונה או קובץ וידאו, ומקבלים בחזרה את התוכן לאחר הסרת תאורה (delighting). הממשק מציג שתי לשוניות נפרדות, אחת לתמונות והשנייה לווידאו, וכולל רכיב השוואה מסוג סליידר שמאפשר לבחון את התוצאה מול המקור. בתחתית העמוד יש דוגמאות מוכנות מראש של תמונות וסרטונים שנלקחו מתיקיות המערכת.

מאחורי הקלעים הקוד טוען את המודל Stable-X/yoso-diffuse-v0-2 ומריץ פייפליין ייעודי בשם YOSODiffusePipeline. הפיתוח מבוסס על מאמר מחקרי שפורסם ביוני 2024 ונועד להעריך מחדש את מרקם האובייקט בלי האור שפוגע בו בסצנה המקורית.

מתאים ל

• הסרת צללים מתמונות

  מעלים תצלום בודד כדי לקבל גרסה נקייה מהצללות חזקות שפוגעות במראה האובייקט.

• הכנת טקסטורות לתלת-ממד

  מנקים חומרי צילום מתאורה קיימת כדי ליצור טקסטורת בסיס שמתאימה למנועי רינדור.

• עיבוד תאורה בווידאו

  מעלים סרטון קצר דרך לשונית הווידאו כדי להסיר השפעות אור ישיר לאורך הפריימים.

איפה זה נופל

האפליקציה נמצאת במצב שגיאת קונפיגורציה, כך שסביר להניח שהיא לא תעבוד באופן מיידי בדפדפן בלי תיקון מצד המפתח. בנוסף, המערכת אינה שומרת דוגמאות מחושבות מראש בקאש, מה שאומר שכל דוגמה דורשת עיבוד מלא. עיבוד וידאו כבד משמעותית מתמונה, ובמקרים מורכבים עלול לחרוג ממגבלות הזמן של סביבת הרצה חינמית.

איך משתמשים

בוחרים בלשונית של תמונה או וידאו, גוררים פנימה קובץ מקומי או בוחרים מתוך הדוגמאות, ולוחצים על כפתור השליחה. יש גם כפתור איפוס אם רוצים להתחיל מחדש, והמערכת מציגה פס התקדמות בזמן החישוב. הממשק מוגדר לרוץ על חומרת zero-a10g שמקצה כרטיס גרפי בעת הצורך, אך נכון לעכשיו מוגדר סטטוס שגיאה בהגדרות שעלול למנוע מההרצה לעבוד ישירות בדפדפן.

הרישיון

הפרויקט מפורסם תחת רישיון cc-by-sa-4.0 שמתיר שימוש, כולל שימוש מסחרי, בתנאי שנותנים קרדיט מתאים ומשתפים שינויים תחת אותו רישיון. לגבי הקבצים שאתם מעלים, הם נשמרים כקבצים זמניים בשרת בזמן הריצה כדי לייצר את הפלט.

• שימוש מסחרי
• שינוי הקוד
• חובת שיתוף באותו רישיון

הרישיון המלא ב־Hugging Face ↗