Ovi-ZEROGPU
רץ בדפדפןalexnasaרישיון לא דווח2025-10-03
הדגמה ליצירת סרטוני וידאו קצרים עם אודיו מתוך תמונת מקור והנחיית טקסט. הכלי מתאים למי שרוצה לבדוק שילוב מודלים פתוחים של וידאו וקול בלי להגדיר סביבת עבודה מקומית.
- —הורדות בחודש
- 273לייקים
מה זה
אתם מעלים תמונת פנים או דמות, מקלידים תיאור סצנה בשדה הטקסט, ומקבלים סרטון וידאו שכולל גם פס קול מסונכרן. הממשק כולל דוגמאות מובנות שנשמרו מראש כדי להציג את התוצאה הצפויה בלי להמתין לעיבוד מלא.
מאחורי הקלעים רץ שילוב כבד של כמה מודלים נפרדים. הקוד מפעיל את מנוע Ovi יחד עם Wan2.2 ליצירת הווידאו מתוך התמונה, FLUX לעיבוד תמונה, מודל MMAudio ליצירת הסאונד, ומרכיבי קול נוספים כמו bigvgan ו־Make-An-Audio-2. המערכת מנקה את הטקסט ומחשבת יחסי רזולוציה לפני הרינדור המשולב.
מתאים ל
- הנפשת דמות מתמונה
יצירת תנועה מותאמת אישית מתוך תמונת סטילס קיימת לפי תיאור מילולי.
- הפקת וידאו עם סאונד
קבלת קליפ קצר שמכיל צלילים ואודיו מסונכרנים ישירות מתוך הסצנה.
- בדיקת שילוב מודלים
התנסות מעשית בחיבור שבין מנוע הווידאו Wan2.2 למודל הסאונד MMAudio.
איפה זה נופל
החומרה בדפדפן חלשה יחסית למשימה שדורשת כל כך הרבה מודלים ענקיים במקביל. השם מציין הרצה מקומית, אבל כאן מדובר בגרסה מקוונת מוגבלת במשאבים שעלולה להיעצר בשגיאות זיכרון. בנוסף, חובה לספק גם תמונה וגם טקסט, כך שאי אפשר לייצר סרטון מטקסט בלבד.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
הגישה דרך הדפדפן אינה דורשת תשלום ישיר. היא מנצלת חומרת ענן שיתופית של הפלטפורמה, ולכן יש מגבלות זמן ריצה יומיות. אם המכסה נגמרת, תצטרכו להמתין להתחדשות המשאבים.
כמה זמן לוקח לייצר סרטון?
הפקת וידאו עם סאונד במקביל דורשת עיבוד כבד מאוד. על חומרת A10G של ההדגמה זה עשוי לקחת כמה דקות לכל קליפ, תלוי בעומס ובמספר הצעדים שהגדרתם. הדוגמאות המוכנות מראש מוצגות מיד.
מה קורה עם התמונות והקבצים שמעלים?
הקבצים נשמרים זמנית בשרת לצורך יצירת הווידאו ונמחקים בתום הסשן לפי פונקציית הניקוי בקוד. עם זאת, מדובר בסביבת ענן ציבורית שאינה מתאימה לחומרים רגישים או פרטיים. מומלץ לא להעלות מידע מזהה.
במה הדף הזה שונה מהרצת המודל לבד?
הקוד כאן עוטף את המודלים בממשק גרפי ומנהל את החיבור ביניהם עבורכם. בהרצה עצמאית על מחשב אישי צריך להוריד עשרות גיגה בייטים של משקלים ולהחזיק כרטיס מסך חזק מאוד. הדף מציג גרסה מוכנה אך מוגבלת בכוח העיבוד.
איך משתמשים
טוענים תמונה, כותבים הנחיה בתיבת Scene Prompt ולוחצים על Action. יש גם תפריט הגדרות מתקדם לרזולוציה, שלבי דגימה, סיד וערכי הנחיה נפרדים לווידאו ולאודיו. הריצה מתבצעת על מעבד גרפי מסוג A10G שמוקצה לפי דרישה, כך שבגלל ריבוי המודלים הכבדים התהליך עלול לדרוש המתנה ניכרת בכל יצירה.
הרישיון
היוצר לא הגדיר רישיון בפרויקט. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצרים, והשימוש בתמונות שאתם מעלים ובסרטונים שנוצרים נשאר באחריותכם בלבד תחת תנאי הפלטפורמה.