חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
W

wan-fusionx-lora

רץ בדפדפן

rahul7starרישיון לא דווח2025-05-21

  • gradio

הכלי מייצר סרטוני וידאו קצרים מתוך תמונה קיימת והנחיית טקסט. הוא מתאים למי שרוצה לבדוק הנפשה מבוססת מודל 14B במהירות גבוהה יחסית.

  • —הורדות בחודש
  • 50לייקים

מה זה

מעלים תמונת סטילס, כותבים הנחיית טקסט ומקבלים קובץ וידאו מונפש. הממשק מאפשר לקבוע גם הנחיה שלילית, סיד, אורך בשניות בין שמונה לשמונים ואחת פריימים, ורזולוציית גובה ורוחב מותאמת אישית.

מאחורי הקלעים רץ מודל Wan2.1 תמונה לווידאו בגודל 14B וברזולוציית 720P, בשילוב שכבת LoRA שמבוססת על CausVid. המטרה של השילוב הזה היא לחתוך את כמות הצעדים הנדרשת לארבעה עד שמונה צעדי ריצה בלבד, במקום עשרות צעדים במודל הבסיס.

הממשק כולל דוגמאות מובנות שנטענות בהפעלה עצלה. הדוגמאות מציגות תמונת מקור, פרומפט טקסטואלי ומידות מוגדרות מראש, כדי שאפשר יהיה לבדוק תוצאה בלי להזין קבצים ידנית.

מתאים ל

  • הנפשת תמונות סטילס

    הפיכת איור או צילום לסרטון קצר של שניות בודדות לפי הנחיית טקסט.

  • בדיקת פרומפטים לווידאו

    בחינה של שילובי תמונה והנחיה שלילית בריצה קצרה של ארבעה צעדים.

  • ניסוי בטכנולוגיית CausVid

    בדיקת היכולת של LoRA מזוקק להפיק תנועה ממודל 14B בחומרה קלה יותר.

איפה זה נופל

הבעיה המרכזית היא שהעמוד במצב PAUSED, כך שאי אפשר להריץ בו בדיקות כרגע בלי להעיר או לשכפל אותו. מעבר לזה, זיקוק הריצה לארבעה צעדים אומנם מקצר את זמן ההמתנה, אך הוא עלול לפגוע ביציבות התנועה ובדיוק הפרטים בהשוואה לריצה מלאה של Wan2.1. האורך מוגבל לתקרה של שמונים ואחת פריימים בלבד, וזה לא מתאים ליצירת סרטונים ארוכים.

שאלות
נפוצות

האם השימוש בחינם?

הגישה לעמוד בהאגינג פייס פתוחה בלי תשלום. עם זאת, העמוד מוגדר כרגע במצב מושהה, ולכן תצטרכו להעתיק אותו לחשבון שלכם כדי להשתמש בו. הפעלה בחשבון פרטי עשויה לדרוש מכסת חומרה או תשלום על זמן מעבד גרפי.

כמה זמן לוקח לייצר סרטון?

הריצה מוגדרת לארבעה צעדים בלבד כדי לקצר את התהליך למינימום. על חומרת zero-a10g סרטון קצר כזה אמור להיבנות תוך פחות מדקה. הזמן בפועל מושפע מזמינות המעבד הגרפי ומהעומס בשרתים.

מה קורה לקבצים שמעלים לממשק?

התמונות מעובדות ישירות בקוד של המערכת כדי לחלץ מידות ולייצר את הווידאו. מאחר שאין תנאי שימוש או רישיון מוגדר, מומלץ לא להעלות חומרים רגישים. הקבצים עוברים דרך השרתים שמארחים את הממשק.

האם אפשר להריץ את זה מקומית?

כן, הקוד מבוסס על ספריות סטנדרטיות כמו diffusers ומשתמש במשקלים ציבוריים. תצטרכו מחשב עם מעבד גרפי חזק שיכול לטעון מודל 14B בפורמט bfloat16. בנוסף יש להוריד את קובץ ה־LoRA של CausVid מתוך המאגרים הרלוונטיים.

איך משתמשים

בוחרים תמונה, מגדירים את התיאור ולוחצים על Generate Video. הריצה משתמשת בתשתית מסוג zero-a10g שמקצה כרטיס גרפי לפי דרישה, מה שאומר שלעיתים תמתינו בתור קצר עד שהחומרה תתעורר. עם זאת, נכון לעכשיו העמוד נמצא במצב מושהה ולא מייצר פלט מיידי בדפדפן.

הרישיון

הרישיון לא דווח בעמוד של הפרויקט. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בפלטים, ולא ברור אילו זכויות נשמרות על התמונות שאתם מעלים לאפליקציה.

הרישיון המלא ב־Hugging Face ↗