חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
A

ArcaneGAN-video

רץ בדפדפן

sxelaרישיון לא דווח2022-03-02

  • gradio

הכלי מעבד סרטוני וידאו וממיר אותם לסגנון הציורי של ארקיין. הוא פונה למי שמחפש להחיל את העיבוד הוויזואלי הזה ישירות על וידאו ולא רק על תמונות בודדות.

  • —הורדות בחודש
  • 49לייקים

מה זה

אתם מעלים קובץ וידאו ומקבלים בחזרה גרסה מעובדת באסתטיקה של הסדרה ארקיין. מתחת למכסה המנוע רץ המודל ArcaneGAN, שמשתמש ב־PyTorch וספריות עיבוד תמונה כדי לעבור פריים אחר פריים, לחתוך ולעבד את התוכן.

הממשק כולל כמה מחווני שליטה ידניים, כמו בחירת קצב פריימים בין 12 ל־30, כוונון אורך או מקטעים, ואפשרות להפחתת הבהובים בין הפריימים כדי לייצב את התוצאה הסופית. יש בו גם דוגמאות מוכנות מראש ללחיצה, שמיועדות לבדוק את ההמרה בלי להעלות קובץ משלכם.

מתאים ל

  • בדיקת סגנון על קליפים

    המרת קטעי וידאו קצרים לסגנון אנימציה ציורי לבחינת התאמה ויזואלית.

  • בחינת אלגוריתם ייצוב

    בדיקת יכולת המודל להפחית ריצודים במעבר בין פריימים בווידאו.

  • עיבוד פנים באנימציה

    ניסיון לקבל מראה של דמות מארקיין מתוך סרטון דיוקן מצולם.

איפה זה נופל

הבעיה המיידית היא שהעמוד שבור כרגע ולא מגיב. מעבר לזה, עיבוד וידאו עם רשתות נוירונים על מעבד רגיל מוגבל מאוד באורך הסרטון שניתן לדחוס לפני קריסה, והתוצאות עלולות לסבול מעיוותים בין פריימים אם מנגנון ייצוב התמונה לא מתמודד היטב עם תנועות מהירות.

שאלות
נפוצות

האם הכלי עובד עכשיו בדפדפן?

לא, המופע מדווח כרגע על שגיאת ריצה ולכן לא ניתן להריץ עליו סרטונים ישירות דרך האתר. כדי להשתמש בו צריך להמתין שהיוצר יתקן את ההרצה, או להוריד את הקבצים ולהפעיל אותם בעצמכם. במצבו הנוכחי הממשק לא יחזיר פלט.

כמה זמן לוקח לעבד סרטון?

החומרה שהוגדרה להרצה היא מעבד בסיסי בלבד. המרת וידאו שלם ברשתות נוירונים דורשת כוח מחשוב כבד, כך שעל מעבד כזה התהליך עלול להימשך דקות ארוכות גם לקליפ קצר מאוד. בסביבה ללא כרטיס מסך מאיץ, זה איטי באופן משמעותי מריצה מקומית על חומרה מתאימה.

האם אפשר להריץ את זה במחשב האישי?

כן, הקוד הועלה למאגר ומשתמש בספריות פייתון סטנדרטיות כמו PyTorch ו־Gradio. תוכלו למשוך את הקבצים ולהריץ אותם על המחשב שלכם, במיוחד אם יש לכם כרטיס מסך ייעודי. זה יפתור גם את בעיית שגיאת הריצה שקיימת כרגע בעמוד.

האם השימוש כרוך בתשלום?

הגישה לעמוד ולממשק פתוחה ללא תשלום ואינה דורשת מנוי. עם זאת, אין התחייבות לזמינות של המשאבים, וכפי שניתן לראות הכלי אינו פעיל כרגע. שימוש בקוד עצמו חופשי להורדה, אך לא צוין רישיון רשמי.

איך משתמשים

בפועל, כרגע אי אפשר להריץ את העיבוד בדפדפן כי המופע נמצא במצב של שגיאת ריצה. כשהוא פועל, מעלים קובץ וידאו, מכוונים את הפרמטרים ולוחצים על שליחה. החומרה המוגדרת שם היא מעבד בסיסי בלבד ללא מאיץ גרפי, מה שאומר שעיבוד וידאו שלם פריים אחר פריים צפוי להיות איטי במיוחד.

הרישיון

היוצר לא הגדיר רישיון בקוד או בתיעוד. מבחינה משפטית זה משאיר את זכויות השימוש במצב לא ברור, ולכן לא מומלץ לבנות על הקוד או על תוצרים מסחריים מתוכו בלי לבדוק ישירות מול המפתח.

הרישיון המלא ב־Hugging Face ↗