GPT
L

LHM

רץ בדפדפן

3DAIGCapache-2.02025-03-18

  • gradio

הופך תמונת אדם בודדת לדמות תלת ממדית מונפשת לפי תנועות סרטון. מתאים למי שרוצה לבדוק הנפשה של מודל אנושי מקובץ סטילס.

  • הורדות בחודש
  • 367לייקים

מה זה

מעלים תמונת פורטרט של אדם ובוחרים סרטון תנועה מתוך דוגמאות מוכנות מראש. הממשק מריץ חיתוך רקע בעזרת rembg, מזהה פנים וגוזר תנוחות שלד. לאחר מכן המודל יוצר וידאו מרונדר שמראה את הדמות מהתמונה זזה בהתאם למקור התנועה.

מאחורי הקלעים רץ שילוב מודלים הכולל את LHM בגרסת 500M פרמטרים, זיהוי של facebook/dino-vitb16, ורכיבים נוספים של Paella ו־CogVideo. יש בממשק רשימת דוגמאות מובנות של תמונות וסרטונים לבדיקה מהירה, בלי צורך לחפש קבצים תואמים בעצמכם.

מתאים ל

  • הנפשת תמונות אנושיות

    יצירת סרטון אנימציה קצר מדמות בתמונה סטטית לפי תנועות קבועות מראש.

  • בדיקת מודל LHM 500M

    הערכת איכות שחזור הגוף והפנים שמפיק המודל מול ספריות בדיקה מוכנות.

  • הסרת רקע והתאמת תנוחה

    בחינת יכולות חיתוך הגוף ואיתור השלד האוטומטי בתמונות של אנשים.

איפה זה נופל

האפליקציה כרגע במצב תקלה ולא תפיק פלט אם תנסו ללחוץ עליה בדפדפן. מעבר לכך, אפשרות העלאת סרטון משלכם חסומה בממשק והיא לא אינטראקטיבית, כך שתקועים רק עם סרטוני הדוגמה. תצוגת מודל תלת ממדי בקובץ ישיר מכובה בקוד, ומקבלים רק וידאו שטוח של הרינדור.

שאלות
נפוצות

האם האפליקציה עובדת כרגע בדפדפן?

לא. העמוד נמצא במצב של תקלת זמן ריצה, ולכן לא ניתן להריץ עיבוד עד שהיוצרים יתקנו את הסביבה.

האם אפשר להעלות סרטון תנועה משלי?

לא מתוך הממשק הזה. שדה הווידאו מוגדר כלא פעיל לעריכה, וניתן לבחור רק מסרטוני הדוגמה שהוטענו מראש.

האם אפשר להוריד קובץ תלת ממד אמיתי?

לא דרך הדפדפן. רכיב תצוגת התלת ממד מנוטרל בקוד, והמערכת מוציאה רק קובץ וידאו מרונדר בפורמט MP4.

האם אפשר להריץ את זה על המחשב?

כן. הקוד והמשקלים פתוחים ברישיון apache-2.0, אבל תצטרכו כרטיס מסך חזק וסביבת פייתון כדי להוריד ולהרים את המשקלים בעצמכם.

איך משתמשים

לוחצים על העלאת תמונה או בוחרים דוגמה, בוחרים סרטון תנועה זמין ולוחצים Generate. העיבוד דורש כוח חישוב ורץ על חומרת zero-a10g של Hugging Face, כך שזמני ההמתנה תלויים בעומס השרתים ובמשך הרינדור. נכון לעכשיו העמוד מסומן בשגיאת ריצה, ולכן לא ניתן להפעיל אותו ישירות בדפדפן בלי תיקון של המפתח.

הרישיון

הפרויקט מפורסם ברישיון apache-2.0, שמאפשר שימוש חופשי כולל מסחרי ושינוי קוד. הקבצים והעיבודים שנוצרים נשמרים זמנית על השרת ונמחקים אוטומטית אחרי שעה לפי הגדרות המערכת.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗