GPT
Z

zeroscope-v2

רץ בדפדפן

hystsmit2023-06-27

  • gradio

כותבים תיאור טקסטואלי ומקבלים קטע וידאו קצר שנוצר ישירות מהמילים שלכם. זה מתאים למי שרוצה לבדוק יצירת וידאו פתוחה בלי להתקין סביבת פיתוח כבדה במחשב.

  • הורדות בחודש
  • 177לייקים

מה זה

מזינים פרומפט בתיבת הטקסט ומקבלים סרטון וידאו שנוצר על ידי המודל. מתחת לפני השטח רץ המודל cerspense/zeroscope_v2_576w באמצעות ספריית diffusers עם תזמון מסוג DPMSolverMultistepScheduler, בדיוק של torch.float16 כדי להאיץ את התהליך ולחסוך זיכרון.

בממשק יש לשונית אפשרויות מתקדמות שבה שולטים על מספר הפריימים, מספר צעדי ההסקה (num_inference_steps) וערך ה־seed, כולל תיבת סימון להגרלת סיד אקראי בכל ריצה. הממשק כולל דוגמאות מוכנות מראש שאפשר לטעון בלחיצה אחת כדי לבחון איך המודל מגיב לתיאורים שונים בלי להמציא פרומפט מאפס.

מתאים ל

  • בדיקת רעיונות לסצנות

    מזינים תיאור של תנועה כדי לראות אם המודל מבין את הקומפוזיציה לפני שמריצים פרויקט כבד.

  • יצירת קטעי וידאו קצרים

    מפיקים אנימציות קצרות וניסיוניות לשילוב ברקעים או פרויקטים גרפיים.

  • בחינת פרמטרים שונים

    משנים את מספר צעדי ההסקה והסיד כדי לראות איך ההגדרות משפיעות על איכות הווידאו.

איפה זה נופל

המודל הספציפי שמוטמע כאן מיועד לרזולוציה בסיסית של 576 פיקסלים לרוחב, כך שאיכות התמונה מגורענת ורחוקה מתוצאה חדה של הפקות מקצועיות. תנועות מורכבות נוטות להימרח ופרטים קטנים מתעוותים במהירות לאורך הפריימים. כדאי לזכור שאין כאן מודל upscaler מובנה לשדרוג הרזולוציה, ולכן הקובץ שיוצא מהדפדפן מוגבל באיכותו ומשמש בעיקר לבדיקת היתכנות של סצנות.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

הגישה לממשק דרך הדפדפן היא חינמית לחלוטין. החישוב רץ על גבי חומרת ענן שמוקצית לפי דרישה. אין צורך להזין אמצעי תשלום כדי להתנסות ביצירת סרטונים.

כמה זמן לוקח לכל סרטון להיווצר?

הזמן תלוי ישירות במספר צעדי ההסקה ובכמות הפריימים שהגדרתם. מאחר שהתהליך רץ על מאיץ A10G, העיבוד אורך בדרך כלל בין כמה עשרות שניות לדקות בודדות. אם ישנם משתמשים נוספים שמריצים במקביל, זמן ההמתנה הראשוני עשוי להתארך.

האם אפשר להריץ את זה מקומית במחשב?

כן, הקוד פתוח תחת רישיון MIT ומשתמש בספריית diffusers הסטנדרטית של פייתון. תצטרכו כרטיס מסך עם זיכרון ייעודי שמסוגל לטעון את המשקלים בפורמט float16. בלי חומרה גרפית מתאימה, ההרצה המקומית תהיה איטית מאוד.

במה האפליקציה שונה משימוש ישיר במודל?

האפליקציה עוטפת את המודל בממשק גרפי פשוט שחוסך את הצורך לכתוב קוד פייתון או להגדיר תלויות. מצד שני, היא מריצה רק את גרסת הבסיס 576w ללא מודלים משלימים להגדלת רזולוציה שקיימים באקוסיסטם של zeroscope.

איך משתמשים

מקלידים פרומפט, פותחים את האפשרויות המתקדמות אם רוצים לשנות פריימים או צעדי הסקה, ולוחצים על כפתור ההרצה. האפליקציה רצה על חומרת zero-a10g של Hugging Face דרך מודול spaces, כך שיש גישה למעבד גרפי ייעודי רק בזמן החישוב עצמו. פס התקדמות מציג את קצב הריצה בזמן אמת, אך אם יש עומס של משתמשים ברשת ייתכן שתמתינו בתור קצר לפני שהעיבוד מתחיל בפועל.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי, שינוי קוד והפצה, כולל שימוש מסחרי בכפוף לתנאי הרישיון. הקבצים שאתם יוצרים מעובדים על גבי השרת בעת הפעלת הפרומפט.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗