MoMask

מה זה

כותבים באנגלית תיאור של פעולה אנושית, בוחרים אופציונלית אורך תנועה ומחליטים אם להפעיל קינמטיקה הפוכה (IK). בתמורה המערכת מרנדרת סרטון שמציג מודל שלד נע בחלל בקצב של 20 פריימים לשנייה, מבוסס על שרשרת קינמטית.

מאחורי הקלעים רצים מודלים של MoMask שכוללים MaskTransformer, לצד מודל שיורי, VQ-VAE ייעודי של תנועה ומעריך אורך. הקוד ממיר את נקודות המפרקים לפורמט תנועה ומייצר הדמיה ויזואלית ישירות בדפדפן. הממשק מכיל רשימת דוגמאות מוכנות שמאפשרות לטעון פרומפטים מראש בלי לחשוב על ניסוח.

מתאים ל

• בדיקת תנועות לאנימציה

  קבלת תנועת שלד ראשונית לפי תיאור מילולי כדי לחסוך זמן בעיצוב תנועות בסיסיות.

• המחשת רעיונות לתנועה

  יצירה מהירה של סרטון קצר המציג תנועה פיזית לצורך הדגמה מול צוות פיתוח.

• ניסוי במודל MoMask

  הערכת היכולות של ארכיטקטורת המודל והשפעת קינמטיקה הפוכה על התוצאה ישירות בדפדפן.

איפה זה נופל

התוצאה היא הדמיית קווי שלד פשוטה בלבד, לא מודל תלת ממדי מלא עם טקסטורות, עור או בגדים שמוכן למשחק. בנוסף, ההרצה על מעבד רגיל מגבילה מאוד את מהירות התגובה בהשוואה להרצה על מחשב מקומי עם כרטיס מסך, והדוגמאות אינן נשמרות במטמון מראש כך שכל בדיקה דורשת חישוב מלא.

איך משתמשים

מקלידים הנחיה בתיבת הטקסט או בוחרים מתוך עשר הדוגמאות בעמוד, ולוחצים על Generate. ההדגמה פועלת על מעבד בסיסי בלבד בלי מאיץ גרפי ייעודי, ולכן זמן הרינדור וחישוב השלד צפוי להיות מורגש ואיטי. אין צורך בהתחברות או בהרשמה כדי להריץ, אך ייתכן תור מול משתמשים אחרים באותו רגע.

הרישיון

הרישיון של המרחב לא דווח. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצרים ישירות מתוך הדף, ומומלץ לבדוק את תנאי הפרויקט המקורי לפני שמשלבים את התנועות בפרויקטים חיצוניים.

הרישיון המלא ב־Hugging Face ↗