GPT
S

SkyReels-V1-Hunyuan-I2V

קוד פתוח

Skyworkרישיון לא דווח2025-02-17

  • diffusers
  • safetensors
  • image-to-video
  • en

הנפשת תמונות סטילס לקטעי וידאו קולנועיים עם מיקוד מוחלט בבני אדם, הבעות פנים ותנועה טבעית. פתרון מתאים למי שחייב מודל פתוח להפקה עצמית של דמויות ולא רוצה להסתמך על שירותים סגורים.

  • 13Bפרמטרים
  • 23.9 GBמשקל הקבצים
  • 361הורדות בחודש
  • 281לייקים

מה זה

במקום לנסות לייצר כל סרטון אפשרי, המודל הזה מתמקד באנשים. הבסיס שלו הוא HunyuanVideo שעבר כוונון ייעודי על סדר גודל של עשרה מיליון קטעי קולנוע וטלוויזיה, במטרה לפתור את הבעיה הקבועה של דמויות מעוותות ופנים קפואות בווידאו גנרטיבי. הדגש כאן הוא על תאורה קולנועית, מיקום של שחקנים בחלל והבנה של קומפוזיציה.

בפועל הוא לוקח תמונת קלט ומייצר ממנה סרטון באורך 97 פריימים בקצב של 24 פריימים לשנייה, ברזולוציה של 544 על 960 פיקסלים. נתוני האימון כללו תיוג של 33 סוגי הבעות פנים ולמעלה מ־400 יחידות תנועה, כך שהוא יודע לחבר רגש לתנועה של הגוף ולא סתם למרוח פיקסלים.

מתאים ל

  • הנפשת דמויות מתמונות

    יצירת קטעי משחק ותנועת פנים מדויקת מתוך תמונת שחקן או דיוקן בודד.

  • שוטים קולנועיים לפרויקטים

    הפקת סצנות קצרות עם תאורה דרמטית וזוויות מצלמה מורכבות סביב שחקנים.

  • המחשת תסריטים וסטוריבורד

    הפיכת איורי דמויות לסרטונים קצרים של ארבע שניות לבדיקת הבעה ותנועה.

איפה זה נופל

הפלט מוגבל לרזולוציה בסיסית של 544 על 960 פיקסלים ולאורך של כארבע שניות בלבד, כך שזה לא תחליף לחומר גלם סופי אלא בסיס שדורש שדרוג רזולוציה בהמשך. בנוסף, המודל אומן ספציפית על בני אדם, לכן תמונות של מוצרים, נופים או חיות לא יקבלו את אותו הדיוק. השפה הנתמכת היא אנגלית בלבד, ואי אפשר להזין פרומפטים בעברית.

שאלות
נפוצות

האם אפשר להריץ את המודל על כרטיס מסך ביתי רגיל?

המשקלים שוקלים כמעט 24 גיגהבייט ומבוססים על 13 מיליארד פרמטרים. כרטיסים ביתיים סטנדרטיים יתקשו מאוד להחזיק את המודל ואת פעולת הרינדור בזיכרון, ותצטרכו חומרה מקצועית עם נפח VRAM משמעותי.

האם המודל יודע לקבל הנחיות בעברית?

לא. המודל מוגדר לעבודה בשפה האנגלית בלבד. אם תזינו הנחיות בעברית יחד עם התמונה, התוצאות יהיו בלתי צפויות או שגויות.

האם מותר לשלב אותו במערכת מסחרית כרגע?

לא מומלץ בכלל. בעמוד המודל לא צוין רישיון, מה שאומר שמבחינה חוקית אין לכם הרשאה מפורשת להפיץ אותו או להשתמש בו במוצר מסחרי.

איך מריצים

המשקלים תופסים כמעט 24 גיגהבייט ומבוססים על ארכיטקטורת 13 מיליארד פרמטרים בפורמט diffusers. כדי להריץ את זה מקומית תצטרכו כרטיס מסך רציני מאוד עם זיכרון וידאו נרחב, בדומה לדרישות של HunyuanVideo, שכן תהליך ההסקה דורש משאבים כבדים לרינדור של עשרות פריימים.

קוד ההסקה יושב במאגר הגיטהאב של הפרויקט. אם אין לכם שרת ייעודי עם מאיצים חזקים, הרצה מקומית על מחשב רגיל פשוט תיכשל מחוסר זיכרון, ובמצב כזה עדיף לבדוק קודם את ה־Playground שהם מציעים באתר שלהם.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("Skywork/SkyReels-V1-Hunyuan-I2V")
img = pipe("a photo").images[0]

הרישיון

היוצרים לא דיווחו על רישיון בעמוד המודל. המשמעות המשפטית היא שאין כרגע היתר שימוש מוגדר, ומבחינה מסחרית אסור להטמיע אותו במוצר שלכם עד שהם יפרסמו תנאי רישוי ברורים במאגר הרשמי.

הרישיון המלא בעמוד המודל ↗