tooncrafter

מה זה

אתם מעלים תמונת פתיחה ותמונת סיום של איור מצויר, ובמידת הצורך מוסיפים גם סקיצות מנחות לתנועה או תמונת רפרנס לצביעה. הפלט הוא סרטון קצר של עד 16 פריימים ברזולוציה של 512 על 320 פיקסלים שמגשר על הפער התנועתי בין שני הקצוות.

מאחורי הקלעים רץ שילוב של ToonCrafter ו־DynamiCrafter, שמנצל מודלי פעפוע של תמונה לווידאו יחד עם מודלים של גוגל ו־CLIP להבנת ההקשר. הדוגמאות מציגות חיבור בין ציורי אנימה צבעוניים, אנימציה של סקיצות עיפרון נקיות, וצביעה של רישומי קו לפי תמונת מקור אחת.

מתאים ל

• השלמת פריימים באנימציה

  יצירת תנועה רציפה של עד 16 פריימים בין שני ציורי מפתח נפרדים.

• הנפשת סקיצות קו

  הפקת סרטון קצר מרישומי עיפרון או סקיצות פשוטות לפני שלב הקו הסופי.

• צביעת אנימציה לפי דוגמה

  החלת צבע על רצף סקיצות קו בהתבסס על פריים צבעוני אחד כרפרנס.

איפה זה נופל

זהו מחקר פתוח ולא כלי הפקה גמור, והיוצרים מבהירים במפורש שאחוזי ההצלחה אינם מובטחים בגלל חוסר היציבות של מודלי וידאו. הרזולוציה מוגבלת כרגע ל־512 על 320 בלבד, והאורך המקסימלי הוא 16 פריימים בלבד, כך שלא תפיקו כאן סצנות שלמות או תנועות מורכבות מדי בין פריימים שונים לחלוטין.

איך משתמשים

ממשק הגראדיו מאפשר להעלות את הקבצים ולשלוח את הריצה בלחיצת כפתור אחת בדפדפן, ללא התקנה. החומרה שמריצה את ההדגמה היא כרטיס מסוג zero-a10g. זה מספיק כדי לקבל תוצאה תוך כמה עשרות שניות, אבל זמן הריצה מושפע ישירות ממספר צעדי הדגימה ומהעומס הכללי על השרת המשותף.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי כולל שינוי והפצה. האחריות על התכנים שמעלים והשימוש בהם לפי החוק המקומי חלה במלואה על המשתמשים.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗