sketch2pose
רץ בדפדפןSIGGRAPH2022רישיון לא דווח2022-08-17
מעלים סקיצה של דמות אנושית ומקבלים מודל תלת ממדי של התנוחה שלה. הכלי מיועד למאיירים ואנימטורים שרוצים להפוך ציור ידני מהיר לשלד תנוחה מוכן.
- —הורדות בחודש
- 40לייקים
מה זה
הממשק מקבל קובץ תמונה של סקיצה ומחזיר תצוגת תלת ממד בפורמט SMPL. מתחת למכסה המנוע רץ המודל kbrodt/sketch2pose מבית המחקר שהוצג בסיגרף 2022, שטוען קובצי משקולות של גוף אנושי כדי לשחזר את הזוויות של המפרקים מתוך קווי הרישום בלבד.
בקוד אפשר לראות הגדרות לתיקוני עומק, פרופורציות ואנטומיה. יש מתגים לאורכי עצמות, קיצור פרספקטיבי, מגע עצמי בין איברים וטבעיות התנוחה, שמכוונים את האופטימיזציה של השלד לפי אופי הציור. הממשק כולל דוגמה מוכנה שמציגה סקיצה וטוענת אותה ישירות עם כל האילוצים מסומנים כברירת מחדל.
מתאים ל
- חילוץ תנוחה מאיור
המרת רישום ידני ראשוני של דמות למודל תלת ממדי כדי לבדוק זוויות מצלמה.
- בסיס לאנימציה
יצירת שלד ראשוני של תנוחה עבור מודלים תלת ממדיים בלי לבנות אותו ידנית מאפס.
- בדיקת פרופורציות
הצלבת סקיצה מול מודל גוף תלת ממדי כדי לוודא שהאנטומיה והפרספקטיבה עובדות.
איפה זה נופל
הבעיה המיידית היא שההדגמה שבורה ולא מחזירה פלט. מעבר לתקלה הטכנית, המודל מסתמך על מבנה גוף אנושי מוגדר מראש מסוג SMPL, ולכן הוא לא יתמודד עם דמויות לא אנושיות, פרופורציות מוגזמות של קריקטורה או סקיצות עמוסות מדי ברקע. הקוד מציג דוגמה אחת בלבד, ואי אפשר לדעת ממנה איך המודל מגיב לקווי סקיצה מרושלים.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
הגישה לממשק חופשית ואין שום דרישת תשלום או מנוי. עם זאת, נכון לעכשיו העמוד מציג שגיאת ריצה ולא מעבד בקשות בפועל.
מה קורה לתמונות שאני מעלה?
הקבצים נשלחים לעיבוד על השרת שמריץ את גרדיו. מכיוון שלא פורסם רישיון או מדיניות שמירת מידע, לא כדאי להעלות לשם איורים סודיים או חומרים מסחריים.
האם אפשר להריץ את הכלי על המחשב שלי?
כן, הקוד מבוסס על סקריפט פייתון שמושך את המודל kbrodt/sketch2pose מיוזמת המחקר המקורית. תצטרכו להוריד את הקבצים, להתקין את הספריות הנדרשות ולהריץ מקומית בלי תלות בשרת המקוון.
כמה זמן לוקח לכל סקיצה להפוך לתלת ממד?
ההדגמה מוגדרת על מעבד רגיל ללא כרטיס מסך, מה שהופך את החישובים לאיטיים למדי. כשהמערכת עבדה זה לקח בדרך כלל כמה עשרות שניות לכל תמונה, אבל כרגע העיבוד כלל לא מתחיל בגלל התקלה.
איך משתמשים
בפועל אין מה לבנות על הרצה ישירה ברגע זה. השרת נמצא במצב שגיאת ריצה, כך שהממשק פשוט לא יעבד תמונות חדשות בלי שהמתחזקים יתקנו את הסביבה. המערכת מוגדרת על מעבד בסיסי בלי מאיץ גרפי, לכן גם כשהיא עובדת, שחזור של מודל תלת ממדי דורש לחכות בסבלנות ולא מגיב מיד. אין דרישה לחשבון משתמש או הרשמה.
הרישיון
הרישיון של המרחב לא דווח כלל במאגר. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצרים, ואי אפשר לדעת מה הזכויות על תמונות שמועלות לשם.