VToonify — הדגמה

קוד פתוח

PKUWilliamYangרישיון לא דווח2022-10-02

gradio

הפיכת תמונות וסרטוני פנים לסגנון אנימציה מצויר עם שליטה ברמת העיבוד. הכלי פונה למי שרוצה לבדוק העברת סגנון על פורטרטים ישירות בדפדפן.

11.2 GBמשקל הקבצים
—הורדות בחודש
642לייקים

מה זה

אתם מעלים תמונת פנים או קובץ וידאו, ובוחרים סגנון איור מתוך רשימת אפשרויות. הממשק כולל גם דוגמאות מובנות של תמונות וסרטון להמחשה מהירה. מאחורי הקלעים רץ המודל VToonify, שמבצע העברת סגנון ברזולוציה גבוהה לווידאו ולתמונות פורטרט.

התהליך מחולק לשלבים מוגדרים. תחילה בוחרים סגנון וטוענים אותו למערכת. לאחר מכן קובעים שוליים באמצעות סליידרים של ריווח עליון, תחתון וצדדי, ומבצעים התאמת גודל לתמונה, לפריים הראשון או לכל סרטון הווידאו.

בסוף קובעים את עוצמת האפקט בעזרת סליידר ייעודי, ומפעילים את העיבוד. התוצאה שמתקבלת היא תמונה או סרטון מיושרים שעברו התאמה מלאה למראה המצויר שנבחר.

מתאים ל

הנפשת תמונות פרופיל
המרת תמונת פנים בודדת לאיור מצויר עם שליטה בעוצמת הסגנון שנבחר.
עיבוד סרטוני פורטרט
החלת סגנון אנימציה על קובצי וידאו שלמים שמכילים תנועת פנים.
בדיקת העברת סגנונות
השוואה בין סגנונות איור שונים על אותם נתוני קלט באמצעות דוגמאות מוכנות.

איפה זה נופל

הבעיה המרכזית כרגע היא שהיישום כלל אינו עובד ומדווח על שגיאת ריצה. מעבר לכך, העיבוד אינו ישיר. חייבים לבצע שלב מקדים של יישור והתאמת גודל לפנים עם הגדרת שוליים ידנית, מה שמסבך את התהליך ולא מתאים למי שמחפש לחיצה אחת מהירה.

שאלות
נפוצות

האם השימוש כרוך בתשלום?

הגישה בדפדפן פתוחה ללא תשלום. עם זאת, נכון לעכשיו היישום מציג תקלת ריצה ואינו פעיל.

האם אפשר להריץ את זה מקומית?

כן, קוד המקור בנוי ב־Gradio ומשתמש בספריית PyTorch. אפשר להוריד את הקבצים ולהפעיל אותם על מחשב עם חומרה מתאימה.

כמה זמן לוקח העיבוד?

היישום רץ על מעבד גרפי t4-small ומחייב שלב מקדים לפני ההמרה. עיבוד וידאו מלא צפוי לדרוש זמן רב יותר מתמונה בודדת.

מה קורה עם הקבצים שמעלים לשם?

אין מידע מפורט או רישיון שמגדיר את אופן הטיפול במידע. הקבצים נשלחים לשרת שבו רץ היישום לצורך ביצוע העיבוד.

איך מריצים

העבודה דורשת מעבר ידני בשלושה שלבים. קודם לוחצים על טעינת המודל, לאחר מכן מריצים עיבוד מקדים להתאמת הגודל, ורק אז לוחצים על כפתור ההמרה הסופי. לא נדרשת הרשמה, אך כרגע היישום נמצא במצב של תקלת ריצה ולא מגיב. החומרה שהוגדרה לו היא מעבד גרפי מסוג t4-small.

pip install -U huggingface_hub
hf download PKUWilliamYang/VToonify

הקבצים

28 קבצים במאגר, 11.2 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הרישיון של היישום לא דווח בקוד או בפרטי המאגר. המשמעות היא שאין תנאי שימוש ברורים לגבי שימוש מסחרי, ואין מידע רשמי על שמירת הקבצים שאתם מעלים לשרת.

הרישיון המלא בעמוד המודל ↗