V3D
רץ בדפדפןheheyasרישיון לא דווח2024-03-11
מעלים תמונה אחת ומקבלים סרטון וידאו שמציג סיבוב מלא סביב האובייקט. הפיתוח מיועד למי שרוצה לבדוק יצירת הדמיות תלת-ממדיות מתמונות בודדות.
- —הורדות בחודש
- 56לייקים
מה זה
אתם מעלים תמונת סטילס אחת של חפץ או דמות, ומקבלים קובץ וידאו שנע סביב האובייקט ומציג אותו מזוויות שונות. המערך בקוד משתמש בחבילת rembg כדי לחתוך את הרקע באופן אוטומטי, ממרכז את הנושא בעזרת kiui, ואז מעביר את התוצאה לעיבוד תנועה.
מאחורי הקלעים רץ שילוב של שלושה מודלים: stable-video-diffusion-img2vid-xt של Stability AI ליצירת רצף הווידאו, המודל V3D הייעודי של המפתח, ומודל omnidata של clay3d שמשמש לחילוץ מידע גיאומטרי. הממשק מאפשר לשחק עם פרמטרים טכניים כמו גבולות התמונה, ערכי guidance, סיד, ומספר צעדי פענוח כדי לנסות לשפר את יציבות הסיבוב.
מתאים ל
- הדמיית מוצר בסיבוב
הפיכת צילום בודד של מוצר לווידאו שמציג אותו מכל הצדדים לבדיקה מהירה.
- בדיקת זוויות לדמויות
יצירת מבט היקפי על איור של דמות כדי לבדוק עקביות נפחית.
- ניסוי במודל V3D
בחינת יכולות המודל והפרמטרים שלו מול מודלי וידאו אחרים.
איפה זה נופל
התוצר הסופי הוא סרטון וידאו של סיבוב בלבד, ולא קובץ תלת-ממד אמיתי כמו רשת פוליגונים או קובץ OBJ שאפשר לערוך בתוכנות גרפיקה. מעבר לכך, האפליקציה כרגע תקועה על שגיאת הגדרה ולא תעבוד בלחיצה, מה שמחייב אתכם לקחת את הקוד ולהריץ אותו בעצמכם.
שאלות
נפוצות
האם האפליקציה זמינה לשימוש חינם?
הדף פתוח לגישה חופשית ולא דורש תשלום. עם זאת, כרגע מופיעה שגיאת קונפיגורציה שמונעת ממנה לפעול, ולכן אי אפשר להשתמש בה בפועל עד שהיוצר יעדכן את המרחב.
האם אני מקבל מודל תלת-ממד שאפשר להוריד?
לא, הממשק מוציא קובץ וידאו בלבד המציג סיבוב סביב העצם. אם אתם צריכים קובץ תלת-ממד אמיתי לייבוא בתוכנות כמו בלנדר, הכלי הזה לא מייצר אותו ישירות.
מה קורה לתמונות שאני מעלה לכאן?
התמונות עוברות עיבוד בשרת שבו רץ הקוד, כולל הסרת רקע מקומית בעזרת rembg. מכיוון שלא פורסם רישיון או מסמך פרטיות, מומלץ לא להעלות חומרים רגישים או קבצים מסחריים שאינכם רוצים לחשוף.
האם אפשר להריץ את הקוד באופן עצמאי?
כן, הקוד הציבורי מציג שימוש בספריות מוכרות כמו PyTorch ו־gradio, יחד עם הורדת משקולות מ־Hugging Face. אפשר להוריד את הקבצים ולהרים אותם על מחשב מקומי עם כרטיס מסך חזק כדי לעקוף את שגיאת ההפעלה בענן.
איך משתמשים
טוענים תמונה לחלון הקלט, משנים פרמטרים אם רוצים שליטה בתוצאה, ולוחצים על כפתור Run V3D. לפי ההגדרות האפליקציה אמורה לפעול על גבי מאיץ zero-a10g שמקצה משאבי חישוב רק בזמן הפעולה וחוסך זמני המתנה. עם זאת, נכון לעכשיו מוגדר סטטוס תקלה בקונפיגורציה, כך שאי אפשר להריץ אותה ישירות בדפדפן בלי שהמפתח יתקן את ההגדרות.
הרישיון
הפרויקט פורסם ללא רישיון מוגדר בקבצים. במצב כזה אין אישור מפורש לשימוש מסחרי, ומוטב לא להעלות תמונות פרטיות או רגישות לשרת ציבורי שאינו מפרט את תנאי השמירה והשימוש במידע.