חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
N

NAG_wan2-1-fast

רץ בדפדפן

ChenDYmit2025-06-07

  • gradio

הדגמה שמייצרת סרטוני וידאו קצרים מטקסט בארבעה צעדים בלבד. מתאימה לחוקרים ולסקרנים שרוצים לבדוק שיטה חדשה לשיפור איכות התמונה בריצה מהירה.

  • —הורדות בחודש
  • 72לייקים

מה זה

אתם מקלידים הנחיית טקסט, מוסיפים הנחיה שלילית אם רוצים, ומקבלים קובץ וידאו מרונדר. הממשק כולל גם תיבת סימון להשוואה, שמאפשרת להפיק שני סרטונים במקביל, אחד עם השיטה המוצעת ואחד בלעדיה כדי לראות את ההבדל בעיניים. יש דוגמאות מובנות בממשק עם הנחיות מוכנות מראש לבדיקה מהירה.

מאחורי הקלעים רץ מודל הווידאו Wan2.1 בגודל 14 מיליארד פרמטרים, יחד עם התאמת CausVid LoRA שמאפשרת לחתוך את כמות הצעדים לארבעה עד שמונה בלבד. החידוש כאן הוא Normalized Attention Guidance, טכניקה שמכוונת את תשומת הלב של המודל כדי לנקות עיוותים בלי לשלם בזמן ריצה כבד. המערכת מחשבת בין 8 ל־81 פריימים לפי האורך שתבחרו בשניות.

מתאים ל

  • בדיקת איכות של NAG

    השוואת וידאו עם הנחיית תשומת לב מנורמלת מול וידאו רגיל מאותו פרומפט בדיוק.

  • יצירת קליפים מהירה

    הפקת סרטונים קצרים מטקסט בארבעה צעדים לחסכון בזמן עיבוד.

  • מחקר והשוואת פרמטרים

    בחינת ההשפעה של סולמות הנחיה שונים ושינויי רזולוציה על תנועה מרונדרת.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה פשוט לא עובדת ומודיעה על שגיאת ריצה בעלייה, כך שאי אפשר להתנסות בה ישירות באתר כרגע. מעבר לכך, מודל של 14 מיליארד פרמטרים שרץ בגרסה מכווצת של ארבעה צעדים מקריב פרטים קטנים, ותנועות מורכבות עלולות להיראות מרוחות או מקוטעות. ההגבלה של 81 פריימים מרבית אומרת שלא תוציאו מכאן סרטונים ארוכים.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

הגישה לקישור היא בחינם ואינה דורשת תשלום. עם זאת, נכון לעכשיו הממשק קרס בגלל שגיאת קוד בריצה ולכן לא ניתן להשתמש בו ישירות.

כמה זמן לוקח לייצר סרטון?

הטכניקה נועדה לקצר את התהליך לריצה של ארבעה עד שמונה צעדים בלבד, שזה מהיר מאוד ביחס למודלים רגילים. בפועל, בגלל התקלה הנוכחית בשרת, המערכת אינה מגיבה כלל.

האם אפשר להריץ את זה במחשב האישי?

כן, הקוד מבוסס על ספריות סטנדרטיות וזמין ברישיון פתוח. תצטרכו להוריד את המשקלים של המודל בגודל 14B וכרטיס מסך חזק מאוד עם מספיק זיכרון וידאו כדי להריץ אותו מקומית.

במה זה שונה משימוש רגיל ב־Wan2.1?

המודל המקורי דורש בדרך כלל הרבה יותר צעדי דגימה כדי להגיע לתוצאה חדה. כאן הוסיפו שכבת LoRA בשם CausVid ואת מנגנון NAG, שמנסים לשמור על איכות התמונה גם כשמאיצים את הרינדור לארבעה צעדים.

איך משתמשים

בוחרים פרומפט, מכוונים את מדד העוצמה של ההנחיה, ולוחצים על כפתור ההפקה. אם רוצים, פותחים את ההגדרות המתקדמות ומשנים רזולוציה, כמות צעדים, משך זמן בשניות או סיד. המערכת מוגדרת לרוץ על כרטיס A10G דרך מנגנון שיתוף משאבים. כרגע לא תצליחו להפיק כלום כי הספייס נמצא במצב תקלה טכנית ולא עולה בדפדפן.

הרישיון

הקוד פתוח תחת רישיון MIT, מה שנותן חופש כמעט מוחלט לשימוש מסחרי, שינוי והפצה של הסקריפטים. עם זאת, התוצרים והמודלים תלויים גם בתנאי השימוש של משקלי הבסיס של Wan2.1 ושל רכיבי CausVid, ולכן צריך לבדוק את הרישיונות שלהם לפני שלוקחים סרטונים לשימוש מסחרי.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗