Rotate

מה זה

מדובר במשקולות LoRA קלות משקל שמתלבשות על מודל הבסיס Wan2.1 14B בגרסת תמונה לווידאו ברזולוציית 480p. המטרה כאן מאוד ממוקדת: לקחת תמונה של חפץ, כלי רכב או אדם, ולגרום לו להסתובב סיבוב מלא סביב צירו בסרטון קצר. במקום להיאבק בפרומפטים טקסטואליים שלרוב מתעלמים מבקשות של זוויות צילום, המודל אומן להגיב למילת הפעלה ספציפית.

האימון עצמו צנוע למדי, ובוצע במשך 20 מחזורים על גבי 30 שניות של וידאו בסך הכול, שחולקו ל־12 קטעים קצרים ומתויגים. החידוש כאן הוא עצם היכולת לבודד תנועת מצלמה מסוג זה למשקל קטן, בלי להעמיס על מודל הבסיס הגדול שמנהל את הרינדור בפועל.

מתאים ל

• הצגת מוצרים לחנויות

  הפיכת תמונת סטילס בודדת של מוצר לסרטון סיבוב קצר המדגים נפח, בלי צורך בצילום וידאו באולפן.

• אפקטים לווידאו ב־ComfyUI

  שילוב תנועת מצלמה של 360 מעלות כשלב מוגדר מראש בתוך צינור ייצור תוכן קיים מבוסס Wan2.1.

• הנפשת דמויות לרשתות

  יצירת סיבוב סביב דמות או כלי רכב מתמונה אחת, לצורך קטעי מעבר מהירים בסרטונים.

איפה זה נופל

הנתון הבעייתי ביותר הוא נפח האימון. אימון על 30 שניות וידאו ו־12 קליפים בלבד מעיד על בסיס דאטה צר מאוד. המודל עלול להיכשל בשמירה על עקביות של פרטים מאחור, שכן הוא צריך להמציא את החלק הנסתר של האובייקט.

בנוסף, הוא מוגבל לרזולוציה של 480p בלבד ומותאם ספציפית לגרסת ה־14B של Wan2.1. אם תנסו לחבר אותו לגרסאות אחרות או לייצר תוכן חד ומפורט בברירת מחדל, תיתקלו בעיוותים ובמריחות של התמונה המקורית.

איך מריצים

הקובץ עצמו שוקל 348 מגה־בייט בלבד, אבל הוא לא רץ לבד. כדי להפעיל אותו תצטרכו להעלות קודם את מודל הבסיס Wan2.1 14B I2V, שדורש מעבד גרפי חזק מאוד עם נפח זיכרון משמעותי, בדרך כלל 24 גיגה־בייט ומעלה כדי לעבוד מקומית בצורה סבירה.

המפתחים סיפקו קובץ זרימת עבודה ל־ComfyUI המבוסס על התוסף של Kijai, שם מחברים צומת LoRA ייעודי למודל הבסיס. ההגדרות המומלצות כוללות עוצמת מודל של 1.0, Embedded Guidance Scale בערך של 6.0, ו־Flow Shift ברמה של 5.0, יחד עם צירוף מילת ההפעלה r0t4tion 360 degrees rotation לפרומפט. אם אין לכם חומרה ייעודית, עדיף להריץ את זה דרך שירות ענן או דרך האפליקציה של היוצרים.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("Remade-AI/Rotate")
img = pipe("a photo").images[0]

הקבצים

10 קבצים במאגר, 348 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• rotate_20_epochs.safetensors359.3 MB
• example_videos/chair-rotate.gif3.1 MB
• example_videos/bike_rotate.mp4848.6 KB
• workflow/workflow_screenshot.png768.8 KB
• example_videos/man_rotate.mp4592.0 KB
• example_videos/figure_rotate.mp4452.5 KB
• example_videos/chair_rotate.mp4172.7 KB
• workflow/wan_img2vid_lora_workflow.json15.3 KB
• README.md6.7 KB
• .gitattributes1.9 KB

הרישיון

הפרויקט מופץ תחת רישיון apache-2.0. הרישיון הזה מתיר שימוש מסחרי מלא, שינוי של הקוד והמשקולות, והפצה מחדש בלי תשלום תמלוגים. התנאי העיקרי הוא שמירה על הודעת זכויות היוצרים והרישיון המקורי. יש לוודא בנפרד שגם תנאי השימוש של מודל הבסיס Wan2.1 מאפשרים את השימוש המסחרי שאתם מתכננים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗