ECON
רץ בדפדפןYuliangרישיון לא דווח2022-12-30
הכלי יוצר מודלים תלת מימדיים של אנשים לבושים מתוך תמונה בודדת או תיאור טקסט. הוא מתאים ליוצרי תלת מימד וחוקרים שמחפשים שחזור של בגדים ותנוחות גוף.
- —הורדות בחודש
- 105לייקים
מה זה
מזינים תמונה מקובץ, מצלמים בוובקאם, או מייצרים תמונה ישירות בממשק באמצעות שילוב של טקסט ותנוחה. אפשר גם לבחור מתוך דוגמאות מוכנות מראש של תנוחות ובגדים. המערכת מחזירה תצוגה מקדימה של נורמלים, מודל גוף בסיסי של SMPL-X, מודל תלת מימדי סופי של האדם עם הבגדים, ואפשרות להפיק סרטון הדגמה קצר.
מאחורי הקלעים רץ שרשור של מספר מודלים כבדים. הוא משתמש ב־Stable Diffusion 1.5 יחד עם ControlNet ו־OpenPose כדי לנתח או לייצר את התמונה, ובמודלים של ECON, ICON ו־PIXIE כדי לשחזר את הגיאומטריה המפורטת של הבגדים והגוף בתלת מימד.
מתאים ל
- שחזור דמויות לתלת מימד
המרת תמונת אדם בודדת לקובץ תלת מימדי שמציג את הבגדים והקפלים שלהם.
- הפקת וידאו מסתובב
יצירת סרטון קצר שמציג את הדמות התלת מימדית מכל הזוויות לצורכי תצוגה.
- יצירת דמויות מטקסט ותנוחה
שילוב בין שלד תנועה לפרומפט טקסטואלי כדי לבנות מודל גוף לבוש מאפס.
איפה זה נופל
הבעיה המרכזית היא שההדגמה שבורה לחלוטין כרגע ולא מגיבה בגלל שגיאת ריצה. מעבר לזה, השחזור נשען על זוויות מסוימות, ואם תעלו תמונה עם בגדים מורכבים במיוחד או תנוחה חריגה, הגיאומטריה עלולה להתעוות בחלקים הנסתרים מהמצלמה.
שאלות
נפוצות
האם השימוש בעמוד הזה עולה כסף?
הגישה להדגמה באתר היא בחינם ואינה דורשת תשלום. עם זאת, נכון לעכשיו היא נמצאת במצב שגיאה ולא מאפשרת להריץ דבר בפועל.
כמה זמן לוקח לקבל תוצאה?
לפי הכפתורים בממשק, יצירת המודל התלת מימדי לוקחת כשלוש דקות. אם תרצו לייצר גם סרטון וידאו של הדמות, תצטרכו להמתין כשלוש דקות נוספות.
האם אפשר להריץ את זה מקומית במחשב?
כן, המפתחים מספקים קובץ דוקר, מדריך התקנה לווינדוס ואפילו מחברת קולאב בחינם. יש להם גם תוסף מיוחד לתוכנת בלנדר למי שרוצה לעבוד מקומית.
מה קורה עם התמונות שאני מעלה?
התמונות מעובדות ישירות על גבי השרת שמריץ את הדוקר. מכיוון שלא פורסם רישיון או מסמך פרטיות מסודר, אין לדעת אם הקבצים נשמרים.
איך משתמשים
בפועל בוחרים או מייצרים תמונה, ואז לוחצים על כפתור השליחה. לפי הממשק, עיבוד המודל לוקח כשלוש דקות, ויצירת סרטון דורשת עוד שלוש דקות בנפרד. אין צורך בהתחברות, אבל כרגע העמוד מדווח על שגיאת ריצה כללית, כך שהוא לא עובד בדפדפן. החומרה שהוקצתה לו היא כרטיס T4 יחיד, עומס חריג לשרשרת מודלים כל כך מורכבת.
הרישיון
הרישיון לא מדווח בעמוד. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי במודלים שנוצרים, ואין הגדרה מה קורה עם התמונות שאתם מעלים לשרת.