DepthCrafter — הדגמה

מה זה

אתם מעלים קובץ וידאו ומקבלים בחזרה שני סרטוני תוצאה שמציגים את מפת העומק של הסצנה לאורך זמן. הממשק כולל חמישה סרטוני דוגמה שמראים תוצאות מוכנות מראש ברזולוציה מקסימלית של 1024, כך שאפשר לראות את התוצאה מיד בלי להמתין לעיבוד קובץ חדש.

מאחורי הממשק רץ צינור עיבוד שמבוסס על מודל DepthCrafter של tencent יחד עם רכיבים מתוך מודל הווידאו של stabilityai. הקוד טוען ארכיטקטורת יונט מיוחדת שמותאמת לחישוב תנאי מרחב וזמן, במטרה לשמור על מפת עומק יציבה לכל אורך הפריימים בלי קפיצות או עיוותים פתאומיים בין פריים לפריים.

מתאים ל

• הפקת מפות עומק לווידאו

  יצירת שכבת עומק ויזואלית עבור כל פריים בסרטון קיים.

• הזנה למנועי תלת ממד

  שימוש במפות העומק לשחזור מרחבי או יצירת אפקטים מבוססי מרחק.

• בדיקת איכות ועקביות

  השוואת יציבות העומק לאורך זמן בעזרת סרטוני הדוגמה המוכנים.

איפה זה נופל

עיבוד וידאו מלא על חומרת שיתוף לוקח זמן, במיוחד אם מגדילים את מספר שלבי הניקוי או הרזולוציה. חמש הדוגמאות בעמוד מגיעות עם תוצאות שנשמרו מראש במטמון, כך שהן לא משקפות את זמן ההמתנה האמיתי שייקח לסרטון שלכם. בנוסף, הממשק מוגבל לפרמטרים הבסיסיים שנחשפו ולא מתאים לעיבוד סרטים ארוכים ברצף.

איך מריצים

מעלים קובץ וידאו או בוחרים דוגמה, ואם רוצים אפשר לפתוח הגדרות מתקדמות כדי לשנות שלבי ניקוי רעש, הנחיה, רזולוציה, אורך פריימים וקצב תצוגה. לוחצים על כפתור היצירה וממתינים. השרת מקצה כרטיס גרפי A10G לפי דרישה דרך זירו גראפיו, כך שאם יש עומס תצטרכו להמתין בתור לפני שהעיבוד מתחיל.

pip install -U huggingface_hub
hf download tencent/DepthCrafter

הקבצים

7 קבצים במאגר, 2.9 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• diffusion_pytorch_model.safetensors3.0 GB
• assets/visualization.gif95.0 MB
• NOTICE8.2 KB
• LICENSE2.1 KB
• README.md2.1 KB
• .gitattributes1.6 KB
• config.json891 B

הרישיון

הרישיון בעמוד מסומן כ־other ולא כרישיון קוד פתוח סטנדרטי. המשמעות היא שתנאי השימוש המסחרי או ההפצה לא מוגדרים במפורש בטקסט החופשי, וצריך לבדוק את תנאי המודל של טנסנט לפני שמשלבים את התוצרים במוצר מסחרי.

הרישיון המלא בעמוד המודל ↗