חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
V

viggle-animate

רץ בדפדפן

Viggleרישיון לא דווח2026-09-01

  • gradio

הדגמה שמלבישה דמות מתמונה בודדת לתוך סרטון תנועה קיים בארבעה צעדי דגימה. מתאים למי שרוצה לבדוק אנימציית דמויות לפי סרטון מקור ישירות בדפדפן.

  • —הורדות בחודש
  • 38לייקים

מה זה

אתם מעלים סרטון תנועה באורך של 4 עד 10 שניות ותמונת סטילס של דמות. בשלב הראשון המערכת משתמשת ב־gpt-image-2 כדי לצייר מחדש את הפריים הראשון של הסרטון עם הדמות שלכם באותה פוזה בדיוק, או שאתם מעלים פריים ראשון מוכן מראש ועוקפים את השלב הזה. הפריים המצויר הזה הוא התנאי היחיד שהמודל מקבל יחד עם הסרטון, ללא מודלים לזיהוי שלד, מסיכות או סגמנטציה.

מתחת למכסה המנוע רץ המודל Viggle-Animate שמשתמש בטרנספורמר בגודל 62 גיגה-בייט ובארכיטקטורת MiniMax-H3 דרך diffusers. המודל מרנדר רק כמויות פריימים לפי נוסחה קבועה ומינימום של 124 פריימים, כך שסרטונים קצרים מוקפאים בסופם ואז נחתכים חזרה לאורך המקורי. הדוגמאות המוכנות בתחתית העמוד מגיעות עם פריים ראשון צבוע מראש ומציגות את הרינדור הסופי ללא שימוש במודל התמונות.

מתאים ל

  • אנימציית דמות לפי סרטון

    העלאת קטע תנועה קצר והלבשת דמות מתמונה על התנועות המקוריות ללא צורך בהגדרת שלד.

  • בדיקת המודל עם פריים מוכן

    עקיפת מודל הציור על ידי העלאת פריים ראשון ערוך מראש, מה שחוסך זמן ומאפשר תוצאה דטרמיניסטית.

  • הערכת ביצועים בדוגמאות

    הרצת הדוגמאות המובנות בעמוד כדי לבחון את איכות הרינדור של המודל בלי לבזבז מכסות GPU או ציור יומיות.

איפה זה נופל

ההדגמה הזו תלויה בשירות חיצוני של OpenAI עבור הפריים הראשון, ואם מעלים אדם פוטו-ריאליסטי מנגנון הסינון שלהם עלול לחסום את התהליך ולעצור את ההרצה. בנוסף, כל סרטון מעל 10.1 שניות נחתך אוטומטית, כך שאי אפשר לייצר קטעים ארוכים. המודל גם מוסיף סימן מים וחותך את הסרטון רק אחרי שחלון החישוב בכרטיס המסך נסגר.

שאלות
נפוצות

האם השימוש בחינם?

הדף עצמו פתוח ללא תשלום, אבל הרינדור דורש משאבי ZeroGPU xlarge שגוזלים יותר ממכסת היום של חשבון חינמי. בפועל, יצירת סרטון חדש משלכם דורשת חשבון PRO, אלא אם אתם מפעילים רק את הדוגמאות המוכנות.

כמה זמן לוקח התהליך?

זמן העבודה תלוי במצב השרת. בהרצה ראשונה יש עיכוב של 14 שניות רק להעברת המשקולות לכרטיס המסך, ושלב הציור של הפריים הראשון רץ על המעבד לפני שהסרטון עצמו מרונדר בארבעה צעדים.

מה קורה לסרטונים שאני מעלה?

הסרטונים והתמונות מעובדים בשרת כדי לייצר את התוצאה. הפריים הראשון של הסרטון נשלח ל־gpt-image-2 של OpenAI כדי לצייר מחדש את הדמות, כך שהמידע עובר דרך שירות חיצוני אלא אם העליתם פריים צבוע מראש.

האם אפשר להריץ את זה מקומית?

אפשר להוריד את המשקולות, אבל המודל דורש לפחות 73.5 גיגה-בייט של זיכרון וידאו פנוי בכרטיס מסך כדי להחזיק את הטרנספורמר וה־VAEs. רוב המחשבים האישיים לא מסוגלים להריץ אותו ללא חומרה מקצועית מתאימה.

איך משתמשים

לוחצים על Generate אחרי העלאת הסרטון והתמונה. אין צורך בהתחברות כדי לשלוח בקשה, אבל שלב ציור הפריים מוגבל לחמש פעולות ביום לכל משתמש. המודל שוקל 73.5 גיגה-בייט על כרטיס המסך יחד עם ה־VAE, ולכן הוא דורש חומרת ZeroGPU מסוג xlarge של 96 גיגה-בייט. החומרה הזו מחייבת כפול מכסת השימוש הרגילה, כך שבפועל חשבון חינמי לא יספיק לרינדור מלא ויש צורך במנוי PRO שכולל 40 דקות מכסה. הרצה ראשונה על שרת קר לוקחת עוד 14 שניות רק להעתקת המשקולות מהזיכרון לכרטיס.

הרישיון

הרישיון של המודל או היישום לא דווח בעמוד. המשמעות היא שאין הרשאה רשמית וברורה לשימוש מסחרי בקוד או במשקולות, וכל שימוש בפלטים או בחומרי המקור דורש זהירות ובדיקה מול בעלי הזכויות.

הרישיון המלא ב־Hugging Face ↗