LIA-X

מה זה

הקוד חושף ממשק שמחולק לשלוש לשוניות עבודה. יש כאן לשונית להנפשה, לשונית לעריכת וידאו ולשונית לעריכת תמונות סטילס. לפי הקבצים הנטענים בממשק, אתם מעלים תמונת פנים או קובץ וידאו, ומפעילים עליהם מניפולציות שונות של הבעות ותנועה.

מאחורי הקלעים רץ גנרטור מבוסס PyTorch שטוען משקולות מתוך קובץ lia-x.pt מהמאגר של המפתח. המערך כולל דף הוראות מובנה שמסביר איך לעבוד עם כל חלק, אך מעבר למבנה הלשוניות והגנרטור לא פורסם פירוט של דוגמאות מוכנות מראש.

מתאים ל

• הנפשת תמונות פנים

  יצירת תנועה והבעות מתוך תמונת פורטרט בודדת בלשונית ההנפשה.

• עריכת סרטוני וידאו

  שינוי תווי פנים ותנועות בתוך קובץ וידאו קיים בלשונית עריכת הווידאו.

• עריכת תמונות סטילס

  ביצוע מניפולציות נקודתיות על הבעות פנים בתמונות סטטיות.

איפה זה נופל

החיסרון הברור ביותר הוא שההדגמה הנוכחית בכלל לא עובדת וקורסת מיד עם שגיאת מערכת. גם כשהיא פעילה, המודל הזה מוגבל ספציפית לפורטרטים ולתווי פנים אנושיים, כך שלא תוכלו לעבד איתו תמונות גוף מלא או נופים.

מעבר לכך, אין שום דרך לדעת מהממשק הקיים איך המודל מתמודד עם תאורה קשה או זוויות פנים חדות, כי אין דוגמאות מובנות שמוכיחות את איכות התוצאה בפועל.

איך משתמשים

כדי לעבוד עם הממשק בוחרים בלשונית המתאימה, מעלים קובץ תמונה או וידאו ולוחצים על כפתור ההפעלה. האפליקציה מוגדרת לרוץ על חומרת zero-a10g, מה שמספק מעבד גרפי חזק לעיבוד מהיר ברגע שהמערכת עולה.

כרגע אין טעם לנסות להריץ אותה בדפדפן כי הסטטוס שלה מוגדר כשגיאת ריצה. כשהיא תחזור לעבוד, העיבוד אמור להתבצע תוך שניות בודדות בהתאם לעומס על השרתים של הדגמת החומרה.

הרישיון

הקוד מופץ תחת רישיון mit, מה שמאפשר שימוש חופשי כולל התאמה ושימוש מסחרי. לגבי התמונות שאתם מעלים, הן מעובדות על גבי השרת שמארח את ההדגמה ולא נמסר מידע על שמירה שלהן מעבר לזמן הריצה.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗