Text2Human
רץ בדפדפןhystsרישיון לא דווח2022-06-04
הכלי מייצר תמונות של בני אדם לפי תנוחת גוף ותיאורי טקסט של בגדים. הוא מתאים למי שרוצה לבדוק הלבשה וירטואלית מבוססת מודלים ישנים יחסית.
- —הורדות בחודש
- 76לייקים
מה זה
התהליך כאן מחולק לשניים. קודם כל מעלים תמונת תנוחה (Pose) ומקלידים תיאור של מבנה הבגדים, למשל גבר עם חולצה ללא שרוולים ומכנסיים ארוכים, כפי שמופיע בדוגמאות המוכנות. לחיצה על הכפתור הראשון מייצרת מפת תוויות (Label Image) שמגדירה איפה כל פריט יושב.
בשלב השני מוסיפים תיאור טקסטואלי של המרקם והצבעים, ולוחצים על יצירת הדמות. מתחת למכסה המנוע רצים המודלים yumingj/Text2Human ו־yumingj/Text2Human_SSHQ, שמשתמשים בהגדרות צעדי דגימה שנעות בין 10 ל־300 ומספר סיד כדי להוציא את התמונה הסופית.
מתאים ל
- המחשת בגדים על בסיס תנוחה
הלבשת דמות וירטואלית לפי מנח גוף קיים ובחירת פרטי לבוש בטקסט.
- בדיקת חלוקת תוויות גוף
יצירת מפות סגמנטציה של ביגוד לפני שמרנדרים את התוצאה הסופית.
- ניסוי עם מודלי SSHQ
בדיקת היכולת של המודלים המקוריים משנת 2022 ליצור דמויות אנושיות.
איפה זה נופל
הבעיה המיידית היא שהאפליקציה פשוט לא עובדת וקורסת בעלייה. מעבר לזה, הממשק מחייב תהליך נוקשה בשני שלבים ולא סתם פרומפט חופשי, כך שאם מפת התוויות הראשונה יוצאת מעוותת, התמונה הסופית תיראה רע. ההרצה על מעבד רגיל גם לא מאפשרת לקבל תוצאות במהירות סבירה.
שאלות
נפוצות
למה שום דבר לא קורה כשאני מנסה להשתמש בה?
האפליקציה נמצאת בסטטוס של שגיאת בנייה (BUILD_ERROR). הקוד שלה לא התקמפל בהצלחה בשרת, ולכן אי אפשר להריץ אותה כרגע ישירות בדפדפן.
האם השימוש עולה כסף או דורש התחברות?
הגישה לגרסה הזו חופשית לגמרי ואין דרישת תשלום או הרשמה. עם זאת, כל עוד התקלה לא תוקנה, היא לא שמישה.
אפשר להריץ את המערכת הזו מקומית?
כן, הקוד הציבורי זמין ואפשר למשוך אותו יחד עם המודלים yumingj/Text2Human. תצטרכו מחשב עם מאיץ גרפי חזק, כי על מעבד רגיל הרינדור יהיה איטי מאוד.
כמה זמן לוקח לייצר דמות אחת?
ברירת המחדל מוגדרת על 256 צעדי דגימה. על חומרת מעבד בסיסית כמו שהוגדרה כאן, פעולה כזו יכולה להימשך דקות ארוכות לכל תמונה.
איך משתמשים
במצב הנוכחי אי אפשר להריץ אותה בדפדפן כי היא תקועה על שגיאת בנייה (BUILD_ERROR). אם היא הייתה למעלה, מדובר בהעלאת תמונה, בחירת דוגמה לטקסט, לחיצה על יצירת תווית ואז לחיצה על יצירת הדמות הסופית. המפרט שמוגדר לה הוא מעבד בסיסי (cpu-basic), מה שאומר שרינדור עם 256 צעדים בלי מאיץ גרפי היה לוקח המון זמן.
הרישיון
הרישיון של הפרויקט הזה לא דווח. המשמעות היא שאין הרשאה ברורה להשתמש בקוד או בתוצרים לצרכים מסחריים, וזכויות השימוש במודלים המקוריים נשארות מעורפלות.