ToonComposer — הדגמה
קוד פתוחTencentARCmit2025-08-16
הכלי יוצר סרטוני אנימציה על בסיס תמונת מפתח, שרבוטים מנחים ותיאור טקסטואלי. הוא מיועד למי שרוצה לשלוט בתנועה של הדמויות לאורך ציר הזמן ולא להסתמך רק על הנחיה כתובה.
- 340 MBמשקל הקבצים
- —הורדות בחודש
- 146לייקים
מה זה
כדי לייצר סרטון אתם מזינים תיאור מילולי ומעלים לפחות תמונת מפתח אחת לצד סקיצה אחת לפחות, כשכל אחת מהן מוצמדת למספר פריים מסוים. הממשק כולל כלי מברשת שמאפשר לצבוע אזורים בסקיצה כדי לסמן למודל איפה מותר לו לייצר תנועה חופשית, וכן כפתור להיפוך צבעים. יש בממשק גם גלריית דוגמאות מוכנות מראש, כמו איש שמשחק עם דג מתחת למים, ילד וילדה ששותלים פרח וילד שנותן תפוח לאדם מבוגר.
מאחורי הקלעים פועל המודל ToonComposer יחד עם מודל הווידאו Wan2.1 בגרסת 14 מיליארד פרמטרים וברזולוציה של 480p. לצדם רצים מעבדי טקסט כבדים, כולל google/umt5-xxl ודגמי xlm-roberta, שמנתחים את התיאור המילולי ומתרגמים אותו יחד עם הסקיצות לרצף הפריימים.
מתאים ל
- הנפשת דמויות מסקיצה
הפיכת איור בודד וסקיצות קו לסרטון מצויר קצר עם שליטה בתנוחה לאורך הזמן.
- בדיקת תנועה באנימציה
בחינה מהירה של תנועת דמויות לפי פריימים מוגדרים מראש לפני כניסה להפקה מלאה.
- המחשת רעיונות לפי תסריט
שילוב טקסט וציור מהיר כדי לבדוק איך סצנה מצוירת תיראה ברצף תנועתי בסיסי.
איפה זה נופל
חייבים לספק גם טקסט, גם תמונה וגם סקיצה, והמערכת מחזירה שגיאה מפורשת אם חסר תיאור מילולי. הדוגמאות המוכנות מציגות תוצאות נקיות מאוד, אך הן נבחרו בקפידה. אם תעלו סקיצות לא ברורות או תנסו להפיק סגנונות שאינם אנימציה קלאסית, השליטה בתנועה עלולה להישבר. בנוסף, מודל הבסיס מוגבל לרזולוציית 480p, כך שלא תקבלו כאן וידאו חד בחדות גבוהה.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
לא, הגישה לדמו דרך הדפדפן היא בחינם ואינה דורשת תשלום. עם זאת, המשאבים מוגבלים לחומרה שמוקצית להרצה.
כמה זמן לוקח לייצר סרטון?
העיבוד דורש זמן בגלל שילוב של מודל וידאו של 14 מיליארד פרמטרים ומודל שפה ענק. מכיוון שהחומרה מופעלת לפי דרישה, ייתכן שתמתינו מספר דקות עד שהשרת יתפנה ויסיים לייצר את כל הפריימים.
האם אפשר להריץ את זה מקומית במחשב?
הקוד מתבסס על מודלים ציבוריים שנטענים דרך Hugging Face, כולל Wan2.1 ורכיבי ToonComposer. כדי להריץ אותם אצלכם תצטרכו מחשב חזק במיוחד עם כרטיס מסך בעל זיכרון גדול מאוד, בדומה לחומרה שמריצה את הדמו.
מה קורה לקבצים שאני מעלה?
התמונות והסקיצות נשלחות לשרת שמריץ את הממשק לצורך העיבוד. מאחר שלא צוין רישיון או הסכם פרטיות מסודר, לא כדאי להעלות חומרים רגישים או קבצים שאינכם רוצים שיישמרו בסביבת ההרצה.
איך מריצים
בוחרים דוגמה מהגלריה או מעלים תמונה וסקיצות משלכם, מגדירים את מספרי הפריימים, כותבים תיאור ולוחצים על כפתור יצירת הווידאו. הדמו רץ על חומרת zero-a10g, מה שאומר שהמעבד הגרפי מוקצה לפי דרישה בלבד ויכול לקחת זמן להיטען. מודל בסיס בגודל 14 מיליארד פרמטרים יחד עם מודל טקסט ענקי מייצר עומס כבד, כך שזמן הרינדור לא יהיה מיידי, ובשעות עומס ייתכן תור בממשק.
pip install -U huggingface_hub hf download TencentARC/ToonComposer
הקבצים
6 קבצים במאגר, 340 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הרישיון לא דווח בעמוד של האפליקציה. המשמעות היא שאין הרשאה ברורה ומתועדת לשימוש מסחרי בקוד או בתוצרים, ולא ידוע מהם תנאי השימוש במידע שמועלה לשרת.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש