GPT
I

Instant-Video

רץ בדפדפן

KingNishרישיון לא דווח2024-04-26

  • gradio

הדף מייצר סרטוני וידאו קצרים מתוך תיאור טקסטואלי, ומיועד למי שרוצה לבדוק הנפשות מהירות בלי להגדיר סביבת פיתוח כבדה. הוא מתאים ליוצרי תוכן ולסקרנים שמחפשים הדגמה פשוטה ברשת.

  • הורדות בחודש
  • 621לייקים

מה זה

אתם מקלידים תיאור טקסטואלי של מה שתרצו לראות, בוחרים סגנון בסיס וסוג תנועה, ומקבלים קובץ וידאו קצר לצפייה ולהורדה. הממשק כולל דוגמאות מובנות להרצה מהירה כדי לבדוק איך התוצאה נראית בלי לחשוב על ניסוח מאפס.

מאחורי הקלעים הקוד משתמש בצינור של AnimateDiff יחד עם AnimateDiff-Lightning של ByteDance שנועד לקצר את זמני היצירה. הוא משלב מודלי תמונה כמו epiCRealism למראה ריאליסטי או ToonYou לאנימציה, וטוען שכבות LoRA ייעודיות לשליטה בתנועות מצלמה כמו פנורמה וגלגול.

מתאים ל

  • בדיקת רעיונות להנפשה

    ניסוי מהיר של פרומפטים כדי לראות איך תיאור טקסטואלי מתורגם לתנועה קצרה.

  • יצירת קטעי רקע קצרים

    הפקת סרטונים קצרים לשיבוץ ברשתות חברתיות או כהדגמות ויזואליות.

  • השוואת סגנונות תמונה

    מעבר בין מודל ריאליסטי למודל מצויר כדי לבחון איזה כיוון מתאים לפרויקט שלכם.

איפה זה נופל

הבעיה המרכזית כרגע היא שהאפליקציה נמצאת במצב מושהה, ולכן היא פשוט לא תייצר כלום כרגע. מעבר לזה, מודלים מסוג AnimateDiff מייצרים סרטונים של שניות בודדות ברזולוציה נמוכה למדי. מי שבונה על עברית יגלה שהמודלים הללו אומנו על אנגלית ולא יבינו הנחיות מקומיות.

שאלות
נפוצות

האם השימוש פתוח בחינם?

הגישה לחלל פתוחה ברשת, אבל כרגע הוא נמצא במצב מושהה ולא מייצר סרטונים. כשהוא פעיל, השימוש בממשק הבסיסי אינו כרוך בתשלום.

כמה זמן לוקח לייצר סרטון?

הקוד משתמש בגרסת Lightning שנועדה לעבוד במספר צעדים קטן, אך החומרה המוגדרת היא מעבד רגיל. ריצה על מעבד ללא מאיץ גרפי חזק נמשכת דקות ארוכות לסרטון קצר.

אפשר להריץ את זה על המחשב?

כן, הקוד מבוסס על ספריות Diffusers של פייתון ומודלים ציבוריים. תצטרכו כרטיס מסך מתאים עם זיכרון מספק והתקנה של התלויות המופיעות בקוד.

האם אפשר לכתוב הנחיות בעברית?

המודל מבוסס על רכיבי CLIP של OpenAI שאומנו בעיקר באנגלית. הנחיות בעברית יתנו תוצאות גרועות או שלא יובנו כלל, ולכן חובה לכתוב באנגלית.

איך משתמשים

בפועל אתם כותבים טקסט בתיבה, בוחרים סגנון בסיס, מגדירים את תנועת המצלמה ומספר הצעדים, ולוחצים על כפתור השליחה. הסטטוס של החלל הזה מוגדר כרגע כמושהה, כך שאי אפשר להריץ בו פקודות ישירות בדפדפן עד שיחזור לפעילות. אם הוא מופעל על מעבד רגיל, יצירת וידאו כזה לוקחת זמן רב.

הרישיון

היוצר לא דיווח על רישיון בעמוד של הפרויקט. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצרים, ורצוי להתייחס לכל מה שיוצא משם כהתנסות אישית בלבד עד שיוגדר רישיון מסודר.

הרישיון המלא ב־Hugging Face ↗