3D_Photo_Inpainting
רץ בדפדפןEpochingרישיון לא דווח2022-03-02
הכלי מייצר סרטון וידאו עם תנועת מצלמה תלת ממדית מתוך תמונת סטילס אחת. הוא מתאים למי שרוצה להפיח עומק ותנועה בתצלומים ישנים או דיגיטליים בלי למדל ידנית.
- —הורדות בחודש
- 49לייקים
מה זה
אתם מעלים תמונת סטילס ומקבלים קובץ וידאו שבו המצלמה נעה במרחב סביב האובייקט. הממשק מאפשר לקבוע שני פרמטרים בלבד, כמות הפריימים משישים עד מאתיים וארבעים, וקצב הפריימים לשנייה בין עשר לארבעים. בדוגמאות המוכנות מופיעים קבצים של כלב וירח כדי להמחיש את סוג הקלט.
מאחורי הקלעים הקוד משתמש במודל MiDaS להערכת עומק מתמונה בודדת, לצד רשתות ייעודיות להשלמת צבע, עומק וקצוות באזורים הנסתרים. התמונה מוקטנת אוטומטית כך שהצלע הארוכה שלה לא תעלה על חמש מאות ושתיים עשרה נקודות, והאלגוריתם בונה רשת תלת ממדית ומייצר את הפריימים ברינדור וירטואלי.
מתאים ל
- הנפשת תצלומים ישנים
יצירת סרטון קצר המדמה תנועת עומק מתוך תמונות ארכיון משפחתיות או היסטוריות.
- וידאו לאפקטים חזותיים
הפקת שוטים בתנועה עבור מצגות או סרטונים מתוך תמונות סטילס פשוטות.
- בדיקת הערכת עומק
בחינת יכולות רשתות עומק כמו MiDaS בהפרדת מישורים והשלמת רקע נסתר.
איפה זה נופל
נכון לעכשיו העמוד מדווח על שגיאת ריצה כללית וההדגמה אינה פעילה בדפדפן. מעבר לכך, התמונות מוקטנות לרזולוציה נמוכה של חמש מאות ושתיים עשרה פיקסלים, כך שלא תקבלו וידאו חד ברמת פירוט גבוהה. האלגוריתם גם נשען על הערכת עומק אוטומטית שנוטה לייצר עיוותים ומריחות באזורים מורכבים סביב קווי מתאר של אובייקטים.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה הזאת כרגע דרך הדפדפן?
לא, המצב הנוכחי שלה מוגדר כשגיאת ריצה והיא אינה עובדת ברשת. כדי להשתמש בה יש להריץ את הקוד עצמאית או להשתמש במחברת חיצונית שהוזכרה בהסבר. עד שהמפתח לא יתקן את ההתקנה, העמוד יישאר מושבת.
כמה זמן לוקח לייצר סרטון בודד?
לפי נתוני הקוד, יצירת סרטון נמשכת בין ארבע מאות לשבע מאות שניות על מעבד. מדובר בהמתנה של כשבע עד אחת עשרה דקות לתמונה אחת. הפחתת כמות הפריימים בסליידר מקצרת את זמן הריצה, אך הוא עדיין נשאר ממושך.
האם אפשר להריץ את הכלי על המחשב האישי?
כן, הקוד כולל ממשק גרדיו וניתן להורדה ולהרצה מקומית. אם יש לכם מאיץ גרפי ייעודי, הקוד מותאם לנצל אותו והעיבוד יהיה מהיר בהרבה מאשר על המעבד. המפתח מציין גם אפשרות להיעזר במחברת גוגל קולאב שהוכנה במקור לפרויקט.
האם יש הגבלה על גודל או איכות התמונה שמזינים?
האפליקציה מקבלת קובצי תמונה רגילים, אך מקטינה אותם מיידית. הקוד מבצע כיווץ אוטומטי של הצלע הארוכה לחמש מאות ושתיים עשרה פיקסלים לכל היותר. משום כך אי אפשר להפיק ממנה וידאו ברזולוציה גבוהה.
איך משתמשים
טוענים תמונה לתיבת הקלט, בוחרים את אורך הסרטון ואת קצב הפריימים בעזרת הסליידרים, ולוחצים על שליחה. לפי התיעוד בקוד, עיבוד של דוגמה לוקח בין ארבע מאות לשבע מאות שניות, שזה עשר דקות ואף יותר.
זמן הריצה הארוך נובע מכך שההדגמה מוגדרת על מעבד בסיסי בלבד ללא מאיץ גרפי. הורדת כמות הפריימים מקצרת את ההמתנה, אבל היא עדיין משמעותית מאוד בעבודה על מעבד.
הרישיון
הרישיון של המרחב הזה לא דווח על ידי היוצר. ללא הצהרת רישיון רשמית, אין אישור מוגדר לשימוש מסחרי בקוד או בתוצרים, ולא ידוע מה מדיניות שמירת הקבצים המועלים לשרת.