Video-Depth-Anything

מה זה

אתם מעלים קובץ וידאו רגיל ומקבלים שני נגנים במקביל. אחד מציג את הווידאו המעובד, והשני מציג מפת עומק ויזואלית של הסרטון, כאשר אפשר לבחור אם לראות אותה בצבע או בגווני אפור. הממשק כולל גם דוגמאות מובנות שאפשר לטעון בלחיצה כדי לבחון תוצאות מוכנות מראש בלי להעלות קובץ משלכם.

מאחורי הקלעים רץ הקוד של VideoDepthAnything, שמוריד משקלים ייעודיים מאגר המודלים. הוא משתמש ברכיבים של DepthCrafter וקשור למודלים כמו animatediff לצורך שמירה על עקביות בין הפריימים. המערכת מפרקת את הסרטון לתמונות, מחשבת את המרחקים בכל נקודה, ומרכיבה בחזרה וידאו שלם.

מתאים ל

• הערכת עומק לשוטים קצרים

  בדיקת איכות מפת העומק בסצנות ספציפיות לפני שילוב תלת מימד.

• הכנת מפות אפקטים לווידאו

  יצירת שכבת עומק בגווני אפור לצורך עריכת תאורה ומיקוד בעריכה.

• בחינת המודל מול דוגמאות

  הרצת הסרטונים המובנים להבנת הדיוק של האלגוריתם בתנועה.

איפה זה נופל

ההדגמה מיועדת לקטעים קצרים, והסליידרים בממשק מגבילים מראש את אורך הווידאו, הרזולוציה וקצב הפריימים כדי שהשרת לא ייחנק. אל תצפו לעבד כאן קבצים ארוכים או סרטים מלאים. בנוסף, הדוגמאות המוכנות מראש מציגות מקרים נוחים, ובסרטונים עם תנועות מצלמה חדות או תאורה מורכבת מפת העומק עלולה להבהב בין הפריימים.

איך משתמשים

גוררים סרטון לתיבת הקלט, פותחים את ההגדרות המתקדמות אם רוצים לשנות אורך מקסימלי, קצב פריימים או רזולוציה, ולוחצים על כפתור Generate. העיבוד רץ על מעבד גרפי מדגם A10G דרך תשתית Spaces, כך שאין צורך בהתקנה או בהרשמה. זמן ההמתנה תלוי בעומס ובאורך הווידאו שהגדרתם בסליידרים.

הרישיון

הקוד מופץ תחת רישיון apache-2.0, שמאפשר שימוש חופשי וגמיש למדי כולל שימוש מסחרי והתאמה אישית. המודלים עצמם נמשכים ממאגרים ציבוריים, אך הרישיון חל על התוכנה ולא מבטיח בעלות על חומרי הגלם שאתם מעלים לרשת.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗