CustomNet

מה זה

מעלים תמונת חפץ ומקבלים תמונה שמשלבת אותו בסביבה חדשה לגמרי לפי תיאור טקסטואלי. מתחת למכסה המנוע רצים המודל של TencentARC יחד עם CLIP של OpenAI, בשילוב דוגם מסוג DDIM ששומר על זהות העצם תוך שינוי הרקע.

הממשק כולל דוגמאות מובנות של תיק גב במשרד, נעליים על דרך עפר, מכונית על חוף ים, וכן שילובים בג'ונגל ובשלג. לפי הדוגמאות האלה, הקלט מתאים בעיקר לחפצים בודדים ומוגדרים היטב שצריכים להשתלב ברקע טבעי או משרדי.

מתאים ל

• הדמיית מוצר בזוויות שונות

  יצירת תמונות שיווקיות לחפץ כמו תיק או נעל בסביבות מגוונות בלי להפיק ימי צילום בפועל.

• בדיקת מיקום עצם בפריים

  הצבת מוצר בפינה מוגדרת מראש בתוך תמונה לפי קואורדינטות קבועות.

• החלפת רקע מבוססת טקסט

  שילוב חפץ קיים בתוך סביבה חדשה כמו חוף ים, שלג או ג'ונגל באמצעות כתיבת תיאור בלבד.

איפה זה נופל

זוויות הצפייה מוגבלות מאוד בטווח הערכים של הממשק. זווית העלרוד נעה בין מינוס 30 לפלוס 30 מעלות, וזווית הסיבוב האופקי מוגבלת לטווח של בין מינוס 60 לפלוס 60 מעלות. אי אפשר לסובב חפץ לגמרי או להראות את הצד האחורי שלו. בנוסף, רזולוציית המיקום של התיבה מוגדרת בסליידרים עד 256 על 256, מה שמגביל את השליטה במיקום לתמונות קטנות או לקנה מידה קבוע מראש.

איך משתמשים

טוענים תמונה, לוחצים על כפתור העיבוד המקדים, ואז מכוונים את מיקום העצם בתיבה בעזרת סליידרים של קואורדינטות. לאחר מכן קובעים זוויות צפייה, מזינים פרומפט ולוחצים על הפקת התמונה. החומרה שמוקצה היא מעבד גרפי A10G, אבל המרחב במצב שינה, כך שההרצה הראשונה תדרוש המתנה קצרה להתעוררות השרת.

הרישיון

הקוד והכלי מופצים תחת רישיון Apache 2.0 המאפשר שימוש מסחרי, שינוי והפצה של התוכנה. התוכן שאתם מעלים והתוצרים שנוצרים נשארים שלכם, אך תלויים בתנאי השימוש הרגילים של השרת המארח.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗