GPT
הוספת כלי
W

Wan2.1-Fun-1.3B-Control

קוד פתוח

alibaba-paiapache-2.02025-03-26

  • videox_fun
  • diffusers
  • safetensors
  • i2v
  • video

גרסה קלה ליצירת וידאו עם בקרת תנועה ומבנה, שמיועדת למי שרוצה להריץ שליטה מדויקת כמו עומק או שלד תנועה על חומרה מקומית נגישה יחסית.

  • 18.5 GBמשקל הקבצים
  • 1,003הורדות בחודש
  • 114לייקים

מה זה

המשקל הזה מגיע מבית עליבאבא ומתמקד בשליטה מונחית ביצירת וידאו, מעבר לטקסט בלבד. במקום לתת למודל לנחש את התנועה, אתם מזינים לו תנאי בקרה כמו מפות עומק, קווי קונטור, תנוחות גוף או מסלולי תנועה מוגדרים מראש. הוא אומן על רצפים של 81 פריימים בקצב של 16 פריימים לשנייה, ותומך ברזולוציות של 512, 768 ועד 1024.

ההבדל המשמעותי כאן הוא השילוב בין גודל של 1.3 מיליארד פרמטרים לבין יכולות בקרה מתקדמות. הדגמים הגדולים יותר בתחום דורשים לרוב שרתים כבדים רק כדי לקבל תוצאה יציבה, בעוד שכאן מקבלים מנגנון שליטה מגוון בחבילה קטנה בהרבה, אם כי ברור שאיכות הפרטים והדיוק הפיזיקלי יהיו נמוכים משמעותית מגרסת ה־14B המקבילה.

מתאים ל

  • הנפשת דמויות לפי תנועה

    יצירת וידאו מבוסס שלד תנועה מוגדר כדי לשמור על תנוחה מדויקת לאורך הסרטון.

  • רינדור סצנות עם מפת עומק

    הפקת וידאו ששומר על המבנה הגאומטרי של הסצנה המקורית באמצעות בקרת עומק.

  • בדיקות ופיתוח מקומי

    פיתוח צינורות עבודה של וידאו מבוקר על כרטיס מסך בודד של 12 עד 24 ג'יגה זיכרון.

איפה זה נופל

הכרטיס מדגיש אימון על אנגלית וסינית בלבד, כך שהבנת הנחיות בעברית לא קיימת בצורה אמינה. נוסף על כך, שימוש בקוונטיזציית שמונה ביט כדי להצליח להריץ את המודל על כרטיסים צרכניים פוגע בביצועים ובאיכות הווידאו לפי התיעוד הרשמי. בגודל 1.3B, מורכבות התנועה ועקביות הפרטים לאורך 81 פריימים יהיו מוגבלות בהשוואה לגרסאות הגדולות, וצריך לבדוק היטב עיוותים באזורי תנועה מהירה לפני שמסתמכים עליו.

שאלות
נפוצות

האם אפשר להריץ אותו על מחשב ביתי פשוט?

הוא דורש כרטיס מסך של אנבידיה עם לפחות 12 ג'יגה זיכרון גרפי, כמו RTX 3060, ושימוש במנגנוני פריקה לזיכרון המערכת. מחשבים ללא כרטיס גרפי מתאים או עם פחות זיכרון ייכשלו בהרצה.

מה ההבדל בינו לבין גרסת InP של אותו מודל?

גרסת Control מיועדת ספציפית לקבלת תנאי הדרכה חיצוניים כמו עומק, קווי מתאר ומסלולי תנועה, בעוד שדגמי InP מתמקדים בעיקר ביצירת וידאו מטקסט או מתמונות פתיחה וסיום.

איך מריצים

המשקל דורש הורדה של כ־18.5 ג'יגה־בייט וצורך כ־60 ג'יגה־בייט מקום פנוי בדיסק להתקנה מלאה. הוא נבדק רשמית על כרטיסי אנבידיה החל מ־RTX 3060 עם 12 ג'יגה זיכרון גרפי בשימוש בטכניקות פריקת זיכרון למעבד, ועד כרטיסים מקצועיים כמו A100.

הקוד בספריית VideoX-Fun כולל תמיכה ב־ComfyUI, דוקר מוכן, ומצבי חיסכון שונים בזיכרון כמו קוונטיזציה של שמונה ביט ודחיפת שכבות למעבד. אם אין לכם לפחות 12 ג'יגה זיכרון בכרטיס מסך מודרני, או שאתם מחפשים מהירות הפקה מיידית בלי להמתין לפריקת שכבות, עדיף להשתמש במכונות ענן ייעודיות.

pip install -U huggingface_hub
hf download alibaba-pai/Wan2.1-Fun-1.3B-Control

הקבצים

18 קבצים במאגר, 18.5 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הפרויקט מופץ תחת רישיון אפאצ'י 2.0, שמאפשר שימוש מסחרי מלא, שינוי הקוד והפצה חופשית. אין כאן הגבלות מיוחדות על שילוב במוצרים מסחריים, כל עוד שומרים על הודעת זכויות היוצרים ומצרפים עותק של הרישיון המקורי.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗