frame-interpolation

מה זה

אתם מעלים שתי תמונות נפרדות מהמחשב ובוחרים כמה פריימים לחשב ביניהן בעזרת סליידר שנע בין 2 ל־4, לצד בחירה באחד משלושה מודלים מבוססי FILM שמופיעים בתפריט. התוצאה שמתקבלת היא קובץ וידאו שמשלים את התנועה שחסרה בין שתי נקודות הקצה.

מאחורי הקלעים רץ קוד TensorFlow שמשתמש בארכיטקטורת FILM, שמיועדת להתמודד עם פערי תנועה גדולים בין תמונות. האפליקציה טוענת משקלים ממאגרים שונים של Hugging Face, וכוללת דוגמאות מובנות בממשק שאפשר לטעון בלחיצה כדי לבדוק איך המודל מתמודד עם מעברים מוכנים מראש.

מתאים ל

• הנפשת מעבר בין תמונות

  יצירת קליפ קצר שמחבר שתי תמונות סטילס דומות לתנועה רציפה אחת.

• בדיקת גרסאות FILM

  השוואה מהירה בין שלושת המודלים הנתמכים על אותן תמונות קלט.

• השלמת פריימים לבדיקה

  בחינת יכולת ההשלמה של המודל בתנועות קיצוניות לפני שילובו בקוד מקומי.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה פשוט לא עובדת ברשת כרגע ומחזירה שגיאה. מעבר לזה, הממשק מוגבל למעבר בין שתי תמונות בודדות ולא מאפשר לטעון סרטון שלם כדי להעלות לו את קצב הפריימים. מי שבונה על איכות גבוהה צריך לזכור שחיתוך ושינוי גודל אוטומטיים מתבצעים בקוד, מה שעלול לעוות תמונות ביחס ממדים לא שגרתי.

איך משתמשים

נכון לעכשיו אי אפשר להריץ את ההדגמה בדפדפן כי היא מוגדרת במצב של שגיאת בנייה. במקור, כל מה שנדרש זה לבחור שתי תמונות, לכוון את הסליידר, לבחור מודל וללחוץ על כפתור ההפעלה בלי צורך בחשבון או בהתחברות. מכיוון שהיא מוגדרת לרוץ על מעבד בסיסי בלבד, חישוב פריימים בשיטה הזו צפוי לקחת זמן מורגש בהשוואה לכרטיס מסך ייעודי.

הרישיון

הרישיון של המרחב לא דווח כלל במאגר. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בפלטים, והזכויות על התמונות שמעלים תלויות בתנאי השימוש הכלליים של הפלטפורמה המארחת.

הרישיון המלא ב־Hugging Face ↗