wan2-video-generation

מה זה

אתם מזינים תיאור טקסטואלי, ובמידת הצורך מעלים תמונת מקור, ומקבלים קובץ וידאו באורך שלוש שניות ברזולוציה ברירת מחדל של 1280x704 ובקצב של 24 פריימים לשנייה. הממשק מאפשר לשלוט על מידות הווידאו, כמות הפריימים, מספר צעדי הדגימה והסיד כדי לשחזר תוצאות.

מאחורי הקלעים רץ המודל Wan2.2-TI2V-5B בתצורת דיפיוזרס, מודל של חמישה מיליארד פרמטרים המבוסס על ארכיטקטורת תערובת מומחים. הממשק מציג דוגמאות מוכנות של פרומפטים מגוונים, כמו חתולים מואנשים בזירת אגרוף, נוף הרים מושלג, סצנה תת ימית, עיר עתידנית, ואסטרונאוט שרוכב על סוס בחלל.

מתאים ל

• הנפשת תמונות סטילס

  מעלים תמונה קיימת, מוסיפים תיאור של התנועה הרצויה, ומקבלים סרטון קצר ששומר על יחס התמונה המקורית.

• בדיקת פרומפטים לווידאו

  מזינים תיאור מילולי מפורט כדי לראות איך המודל מפרש תנועה, תאורה ודמויות בתוך שלוש שניות של סרטון.

• יצירת קטעי אילוסטרציה

  הפקת סרטונים קצרים של נופים, חלל או סצנות עתידניות לצורך שילוב במצגות או ברשתות חברתיות.

איפה זה נופל

אם אתם בחשבון חינמי, רוב הסיכויים שהתהליך ייכשל כי ברירת המחדל לוקחת מעל שתי דקות. בנוסף, לא מומלץ להעלות את כמות הפריימים למקסימום של 145 או לעבור את 40 הצעדים, כי העיבוד פשוט יקרוס עקב חריגה ממגבלת הזמן. סצנות מורכבות עם הרבה אובייקטים מתקשות לצאת ברורות, והווידאו מוגבל מאוד באורכו ולא מתאים להפקות של ממש.

איך משתמשים

מקלידים פרומפט, מחליטים אם להעלות תמונה או לשנות הגדרות מתקדמות, ולוחצים על כפתור הייצור. ההרצה משתמשת בהקצאת חומרה של זירו ג'יפיאו, שלפי התיעוד מבוססת על כרטיס H200 בעת העיבוד, וזמן ההמתנה עומד בדרך כלל על שתיים עד שלוש דקות.

למשתמשי חשבון חינמי יש מגבלת זמן ריצה של 60 שניות, בעוד משתמשי פרו מקבלים עד שלוש דקות. אם תחרגו מהזמן המוקצה בגלל ריבוי שלבים או פריימים, התהליך ייעצר בשגיאת זמן.

הרישיון

הפרויקט והמודל Wan2.2 מופצים תחת רישיון אפאצ'י שתיים אפס, שמתיר שימוש חופשי וגם מסחרי בקוד. לגבי המידע והתמונות שאתם מעלים, הם עוברים דרך השרתים של האגב כדי לייצר את הפלט.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗