GPT
D

DynamiCrafter_interp_loop

רץ בדפדפן

Doubiiuother2024-03-15

  • gradio

הכלי מייצר סרטוני וידאו קצרים מתוך תמונות סטילס והנחיות טקסט. הוא מתאים למי שרוצה ליצור לופים מונפשים או מעברים חלקים בין שתי תמונות.

  • הורדות בחודש
  • 165לייקים

מה זה

מעלים תמונה אחת כדי להפיק סרטון שחוזר על עצמו בלופ, או שתי תמונות נפרדות כדי שהמערכת תייצר אינטרפולציה ותגשר ביניהן ברצף תנועה. בנוסף מזינים תיאור טקסטואלי שמכוון את אופי הפעולה, ומקבלים קובץ וידאו ברזולוציה של 320x512.

העיבוד נשען על המודל DynamiCrafter לצד קידודי טקסט ותמונה ממשפחות T5 ו־CLIP של גוגל ו־OpenAI. הממשק כולל דוגמאות מובנות שמציגות מעברים מוכנים ולופים שנשמרו מראש כדי שתוכלו לבחון את היכולות בלי לחכות לריצה חדשה.

מתאים ל

  • מעבר בין שתי תמונות

    יצירת סרטון שמגשר בצורה רציפה בין שתי תמונות שונות בעזרת אינטרפולציה והנחיית טקסט.

  • אנימציה בלולאה מתמשכת

    הנפשת תמונה בודדת לכדי קליפ קצר שחוזר על עצמו ברצף אינסופי.

  • בדיקת תנועה מבוססת טקסט

    שליטה בסגנון ובאופי התנועה של תמונת סטילס באמצעות שינוי פרומפטים וערכי משקל.

איפה זה נופל

הרזולוציה קבועה ונמוכה למדי, 320x512 בלבד, כך שזה לא מתאים להפקות שדורשות חדות גבוהה. ההדגמות שנשמרו מראש מציגות מקרים אידיאליים, אבל תמונות עם תנועות מורכבות או הבדלים חדים מדי בין שני הפריימים עלולות לייצר עיוותים ומריחות.

שאלות
נפוצות

האם השימוש בעמוד כרוך בתשלום?

השימוש בממשק הרשת הזה חופשי לגמרי ולא דורש הזנת אמצעי תשלום. עם זאת, הוא מוגבל למשאבי החומרה השיתופיים שמוקצים לו בענן. אם יש עומס של משתמשים אחרים, ייתכן שתצטרכו להמתין בתור.

כמה זמן לוקח לייצר סרטון?

הזמן תלוי ישירות בערך שתבחרו בסליידר של צעדי הדגימה. ערך ברירת המחדל עומד על 50 צעדים, ועיבוד כזה על מעבד A10G לוקח בדרך כלל כמה עשרות שניות. אם הדף היה במצב שינה, תידרש עוד כדקה רק לצורך הדלקת השרת.

מה קורה לתמונות שאני מעלה לכאן?

הקבצים שלכם נשלחים לשרת לצורך יצירת הווידאו ומוצגים ישירות בתוך הדפדפן. הממשק כולל כפתור שיתוף מובנה שמיועד לפרסום התוצאה. אם מדובר בתמונות פרטיות שאינכם רוצים שיישמרו על שרת ציבורי, עדיף לא להעלות אותן כאן.

במה העמוד הזה שונה מהרצת המודל עצמאית בקוד?

העמוד הזה מציע ממשק גרפי מוכן ופשוט בלי צורך להתקין ספריות, דרייברים או להוריד משקלים כבדים. החיסרון הוא שאין לכם שליטה על חומרת הקצה, הרזולוציה מוגבלת לגודל קבוע, ואתם תלויים בזמינות של שרתי הענן.

איך משתמשים

טוענים את התמונות, כותבים הנחיה, ומשחקים עם פרמטרים כמו מספר צעדי הדגימה, קצב הפריימים וה־CFG. לחיצה על Generate מתחילה את התהליך. החומרה מאחורי הקלעים היא מאיץ A10G שמוקצה לפי דרישה. כשהעמוד במצב שינה לוקח זמן למכונה להתעורר, וכשמבקשים חמישים צעדי ריצה צריך להמתין בסבלנות עד שהווידאו מוכן.

הרישיון

הרישיון מוגדר כ־other, כלומר תנאי שימוש ייעודיים שלא הוגדרו תחת קוד פתוח סטנדרטי. במצב כזה אין להניח שמותר להשתמש בתוצרים למטרות מסחריות, ויש לבדוק את פרטי המאגר לפני שמעלים חומרים רגישים.

הרישיון המלא ב־Hugging Face ↗