GPT
M

fffiloni/MS-Image2Video

רץ בדפדפן

fffiloniרישיון לא דווח2023-08-30

  • gradio

מעלים תמונת סטילס ומקבלים קטע וידאו קצר שמנפיש אותה. מתאים למי שרוצה לבדוק הנפשה מבוססת מודל תמונה לווידאו ישירות בדפדפן בלי לכתוב קוד.

  • הורדות בחודש
  • 294לייקים

מה זה

מזינים תמונה בודדת לממשק, לוחצים על כפתור ההפעלה, והמערכת מחזירה קובץ וידאו מונפש. הממשק כולל שורת דוגמאות מובנות מראש, שנעות בין ציורי רנסנס כמו המונה ליזה, סצנות מודרניות כמו הציור של הופר, איורי אנימה, ועד חיות סביב מדורה, שלג או סירות מפרש.

מאחורי הקלעים רץ המודל damo/Image-to-Video מבית ModelScope בגרסה v1.1.0, באמצעות ספריית הפייתון של modelscope. היישום עצמו עטוף בגרדיו סטנדרטי ומשתמש בספריית spaces כדי לנהל את הגישה למעבד הגרפי בעת יצירת הפריימים.

מתאים ל

  • הנפשת ציורים ואיורים

    הפיכת יצירות אמנות קלאסיות או דיגיטליות לקטעי וידאו קצרים ותנועתיים.

  • בדיקת מודל damo

    התנסות ביכולות ההנפשה של ספריית ModelScope על תמונות שונות.

  • יצירת קטעי רקע קצרים

    הפקת לולאות וידאו מהירות מתוך תמונות נוף, שלג או סירות.

איפה זה נופל

המגבלה הכי בולטת היא שהאפליקציה פשוט מושבתת כרגע ולא תייצר שום דבר בדפדפן. בנוסף, מודל Image-to-Video של damo מגרסה 1.1.0 נוטה לייצר סרטונים קצרים מאוד עם תנועות מוגבלות או עיוותים באזורים מורכבים. הדוגמאות שנבחרו לממשק הן תמונות אמנותיות ספציפיות שלא בהכרח מייצגות את מה שיקרה כשתעלו צילום רגיל מהטלפון.

שאלות
נפוצות

האם האפליקציה עובדת כרגע בחינם?

השימוש בממשק עצמו הוא ללא תשלום, אך כרגע האפליקציה במצב מושהה ולא פעילה. כדי להשתמש בה תצטרכו לשכפל את הקוד לחשבון משלכם. הפעלה כזו בחשבון פרטי עלולה לדרוש תשלום על משאבי חומרה כמו מעבד A10G.

במה היישום הזה שונה מהרצת המודל ישירות?

מדובר במעטפת גרפית פשוטה שנבנתה בגרדיו סביב המודל damo/Image-to-Video מבית ModelScope. במקום להתקין את החבילות ולכתוב קוד פייתון כדי לטעון את הצינור, הממשק מרכז את הקלט והפלט במסך אחד. עם זאת, אין כאן הגדרות מתקדמות שקיימות בקוד המקורי כמו שליטה במספר הפריימים.

האם אפשר להריץ את הכלי הזה במחשב המקומי?

כן, הקוד כולו נשען על קובץ פייתון סטנדרטי וספריית modelscope. תצטרכו להתקין את התלויות ולהוריד את המשקולות של damo/Image-to-Video מגרסה v1.1.0. קחו בחשבון שנדרש כרטיס מסך חזק כדי לבצע את הרינדור בזמן סביר.

איך משתמשים

התהליך פשוט, בוחרים תמונה מהמחשב או מקליקים על אחת הדוגמאות, ולוחצים על כפתור השליחה כדי לקבל את קובץ הווידאו. המקום הוגדר לרוץ על חומרת a10g-large, מה שאמור לספק כוח עיבוד גרפי חזק ויציב לפעולת הרינדור.

הבעיה העיקרית כרגע היא שהאפליקציה נמצאת במצב מושהה, כלומר PAUSED. אי אפשר להריץ אותה בדפדפן עד שהיוצר יפעיל אותה מחדש או שתשכפלו אותה לחשבון שלכם עם חומרה פעילה.

הרישיון

הרישיון של המרחב לא דווח כלל על ידי היוצר. במצב כזה אין הרשאה ברורה לגבי שימוש מסחרי בקוד או בתוצרים, ואי אפשר לדעת מה המדיניות המדויקת לגבי זכויות בתמונות שמועלות.

הרישיון המלא ב־Hugging Face ↗