CharacterGen

מה זה

אתם מעלים תמונת דמות בודדת בפורמט RGBA, קובעים רוחב וגובה שמוגדרים כברירת מחדל ל־512 על 768, ובוחרים האם להפעיל הסרת רקע אוטומטית בעזרת מודל שרץ על ONNX. בשלב הראשון התוכנה מייצרת ארבע תמונות מזוויות שונות: פנים, גב, ימין ושמאל. בשלב השני המערכת ממירה את התמונות למודל תלת ממדי ומציגה אותו להורדה בקובצי GLB או OBJ.

הטכנולוגיה מבוססת על מחקר מ־SIGGRAPH 2024 שנשען על עבודות קודמות כמו TripoSR ו־Tune-A-Video. מתחת למכסה רצים מודלים ממשפחת Stable Diffusion יחד עם DINOv2 ו־DDPM לצורך חילוץ מאפיינים ועיבוד התמונה. הממשק כולל גם דוגמאות מוכנות של דמויות כדי לבדוק את התהליך בלי להעלות קובץ ראשוני.

מתאים ל

• דמויות אנימה לתלת ממד

  המרת איורי דמויות לסריג תלת ממדי בסיסי עבור משחקים ואנימציות.

• יצירת זוויות מרובות

  הפקת תמונות פנים, גב וצדדים מתוך איור בודד לעיצוב קונספט.

• ייצוא קובצי OBJ ו־GLB

  הורדת מודלים תלת ממדיים מוכנים לעריכה בתוכנות כמו בלנדר.

איפה זה נופל

הבעיה הגדולה ביותר היא שהדמו בדפדפן תקול כרגע במצב של שגיאת הרצה, כך שלא ניתן לבצע דרכו יצירה בפועל. בנוסף, הממשק עצמו מציין שהתצוגה המקדימה של קובצי GLB בדפדפן מופיעה כהה יותר מהתוצאה האמיתית ומחייבת הורדה לבדיקה. המודל מתמקד בדמויות ספציפיות בסגנון אנימה ו־VRM, ולפי הקוד הוא מוגבל לזוויות קבועות בלבד.

איך משתמשים

בפועל נכנסים לדפדפן בלי צורך בהרשמה, מעלים תמונה ולוחצים על כפתור שמייצר את ארבע הזוויות לפי מספר צעדי דגימה שנע בין 10 ל־70. אחרי שהתמונות מוכנות, לוחצים על כפתור נפרד לבניית המודל ובוחרים את רמת ההחלקה של הרשת. השרת פועל על כרטיס גרפי A10G Large, אך כרגע הדף מציג שגיאת זמן ריצה ולא ניתן להשתמש בו ישירות ברשת.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש בקוד באופן חופשי כולל התאמות מסחריות, בכפוף לשמירה על הודעות הרישיון. היוצרים ציינו שקבצי הנתונים הגולמיים של הדמויות אינם מחולקים ישירות עקב מגבלות מדיניות, כך שהאחריות על התמונות שאתם מעלים והמודלים שמופקים מהן נשארת אצלכם.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗