video_frame_interpolation
רץ בדפדפןfffiloniרישיון לא דווח2023-04-12
הכלי מייצר פריימים נוספים בתוך וידאו כדי להפוך אותו לחלק יותר. הוא מתאים למי שרוצה להעלות קצב תמונות של קליפ קצר בלי להסתבך עם קוד.
- —הורדות בחודש
- 38לייקים
מה זה
מעלים קובץ וידאו, בוחרים כמה צעדי אינטרפולציה רוצים בין 1 ל־4, וקובעים קצב פריימים סופי של 8, 12 או 24 לשנייה. הפלט מציג נגן עם הווידאו המעובד ואפשרות להוריד אותו כקובץ.
מאחורי הקלעים רץ המודל akhaliq/frame-interpolation-film-style, שמבוסס על TensorFlow ומשתמש בסגנון FILM להשלמת תנועה בין פריימים. בדוגמאות המובנות יש קובץ בשם yoda-fps2.mp4 עם הגדרה של צעד אחד וקצב של 12 פריימים לשנייה, שממחיש איך סרטון מקור מקוטע הופך לתנועה רציפה.
מתאים ל
- החלקת סרטוני אנימציה ישנים
העלאת קטעים שנוצרו בקצב פריימים נמוך והכפלת התמונות לתנועה נעימה יותר לעין.
- יצירת הילוך איטי מקטעים קצרים
חישוב פריימים חסרים כדי למתוח את משך התנועה בלי שהווידאו יקרטע.
- בדיקת ביצועי מודל FILM
בחינה מהירה של תוצאות המודל על גבי קובץ אישי מול דוגמת ה־Yoda המוכנה מראש.
איפה זה נופל
המגבלה הכי גדולה כרגע היא שהאפליקציה פשוט מושהית ולא פועלת בעמוד. מעבר לזה, אפשרויות הפלט מוגבלות מאוד, עם בחירה בין 8, 12 או 24 פריימים לשנייה בלבד, ומקסימום 4 צעדי חישוב, כך שאי אפשר להמיר סרטונים לקצבים מודרניים של 60 פריימים ומעלה. בנוסף, הקוד כולל חיתוך ושינוי גודל פנימי, מה שעלול לשנות את ממדי הסרטון המקורי.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה כרגע?
לא. המרחב נמצא במצב PAUSED, כלומר הוא אינו פעיל על השרתים כעת. כדי להשתמש בו צריך לחכות שבעל המרחב יפעיל אותו או לשכפל את הקוד לחשבון שלכם.
במה הממשק הזה שונה משימוש ישיר במודל?
הממשק עוטף את המודל של FILM בתצוגת Gradio בסיסית ומגביל אתכם לבחירה בין שלושה קצבי פריימים בלבד. בעבודה ישירה עם הקוד אפשר לשלוט ברזולוציה המדויקת, לייצא קצבים גבוהים יותר ולעבד סרטונים ארוכים בלי הגבלות תצוגה.
האם אפשר להריץ את הכלי הזה במחשב מקומי?
כן, הקוד מבוסס על Python, TensorFlow וספריות מוכרות כמו OpenCV ו־MoviePy. אפשר להוריד את קובץ app.py, למשוך את המודל מ־Hugging Face ולהריץ אותו על כרטיס מסך עצמאי.
האם השימוש בו עולה כסף?
האפליקציה עצמה בחינם, אך כאמור היא כרגע מושהית. אם תשכפלו אותה כדי להריץ בעצמכם על חומרת L4 ייעודית, תצטרכו לשלם לפי תעריפי הענן של Hugging Face.
איך משתמשים
גוררים את הווידאו לממשק, מזיזים את הסליידר של הצעדים, בוחרים את ה־FPS הרצוי ולוחצים על Submit. התהליך מוגדר על חומרת מאיץ מסוג L4, אבל כרגע המרחב עצמו נמצא במצב מושהה (PAUSED), כך שלא ניתן להריץ אותו ישירות בדפדפן עד שיפעילו אותו מחדש.
הרישיון
הרישיון של המרחב לא דווח כלל. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בפלטים, ולא ידוע מהם תנאי הפרטיות לגבי סרטונים שמועלים לשם בעת פעילות.