ID-Animator
רץ בדפדפןID-Animatorרישיון לא דווח2024-04-25
הדגמה שמייצרת סרטוני וידאו קצרים מונפשים על בסיס תמונות פנים וטקסט. מתאים למי שרוצה לבחון הנפשת דמויות עקביות בלי להגדיר סביבת עבודה מקומית.
- —הורדות בחודש
- 65לייקים
מה זה
מעלים תמונות פנים של אדם ומוסיפים תיאור טקסטואלי של מה שהוא אמור לעשות. המערכת מחזירה סרטון אנימציה שמנסה לשמור על תווי הפנים של המקור בתוך הסצנה החדשה. יש למטה דוגמאות מובנות שאפשר להריץ כדי לראות איך זה אמור לעבוד.
מתחת למכסה המנוע הקוד משלב זיהוי ויישור פנים באמצעות InsightFace, ומריץ מודלים של AnimateDiff ו־Stable Diffusion יחד עם רכיבי CLIP. השילוב הזה נועד לקחת את המאפיינים של הפנים, להטמיע אותם במודל התמונה ולייצר רצף פריימים יציב.
מתאים ל
- הנפשת תמונות פנים
יצירת סרטון קצר שבו הדמות מהתמונה זזה בהתאם לפרומפט טקסטואלי.
- בדיקת שמירת זהות
בחינה של מידת העקביות של תווי הפנים לאורך פריימים בווידאו.
- ניסוי פרומפטים לווידאו
בדיקה מראש של תיאורי תנועה באמצעות הדוגמאות המוכנות בממשק.
איפה זה נופל
הבעיה המיידית היא שההדגמה מרוסקת ולא פעילה, כך שאי אפשר אפילו לבדוק אותה. בנוסף, חומרת מעבד בסיסית לא מסוגלת להריץ מודלי דיפוזיה ווידאו במהירות סבירה, כך שגם אם השגיאה תיפתר, ללא מאיץ גרפי זמן ההמתנה יהיה ארוך במיוחד.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה כרגע?
לא. העמוד מדווח על תקלת ריצה ולא מציג ממשק פעיל. צריך לחכות שהמפתחים יתקנו את הקוד או יעדכנו את השרת.
האם השימוש בחינם?
הגישה לעמוד בהאגינג פייס פתוחה ללא תשלום. אין צורך לשלם כדי לצפות בדף או להריץ אותו כשהוא תקין.
אפשר להריץ את זה על המחשב במקום?
כן, הקוד מבוסס על ספריות פתוחות כמו diffusers ו־insightface. תצטרכו לשכפל את הקוד ולהריץ אותו מקומית על כרטיס מסך מתאים.
מה קורה לתמונות שמעלים לשם?
הקוד מנקה דוגמאות שמורות ומעבד את הקבצים בתוך השרת הזמני של ההדגמה. עם זאת, כל עוד מדובר בשרת ציבורי, לא מומלץ להעלות תמונות פרטיות או רגישות.
איך משתמשים
בפועל אין טעם לנסות להריץ אותה כרגע בדפדפן. המופע מוגדר על חומרת מעבד בסיסית בלבד ונמצא במצב של שגיאת ריצה, כך שהוא פשוט לא עולה.
אם וכאשר יתקנו את השגיאה, השימוש כולל גרירת תמונות, כתיבת פרומפט, בחירת אורך וידאו ומספר צעדים בהגדרות המתקדמות, ולחיצה על כפתור השליחה.
הרישיון
לא דווח רישיון לפרויקט בקוד או בהגדרות. במצב כזה אין אישור מפורש לשימוש מסחרי, וכל שימוש בקוד או בתוצרים דורש בדיקה ישירה מול היוצרים כדי לא להסתבך עם זכויות יוצרים.