חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
I

Image-to-3D-Object-Generator

רץ בדפדפן

mehdizzmit2025-02-09

  • gradio

הכלי מייצר אובייקטים תלת ממדיים מקובץ תמונה יחיד. הוא מתאים ליוצרים ומפתחים שמחפשים דרך מהירה לבדוק מודלים של TRELLIS ישירות מהדפדפן.

  • —הורדות בחודש
  • 44לייקים

מה זה

אתם מעלים תמונת פנג עם רקע שקוף בלשונית הקלט, ומקבלים תצוגת וידאו מסתובבת של האובייקט התלת ממדי יחד עם אפשרות לחלץ קובץ להורדה. המערך מבוסס על הצינור של cavargas10/TRELLIS, שמחלק את התהליך לשני שלבים עיקריים. השלב הראשון בונה מבנה דליל, והשלב השני מייצר את המרחב הלטנטי המובנה.

הממשק כולל הגדרות מתקדמות שמאפשרות לשלוט בעוצמת ההנחיה ובמספר צעדי הדגימה לכל שלב, כמו גם לקבוע סיד קבוע או אקראי. לאחר יצירת הנכס הראשוני, לוחצים על כפתור חילוץ כדי להפיק מודל בפורמט גילבי, תוך שליטה על רמת פישוט הרשת וגודל הטקסטורה בין חמש מאות ושתיים עשרה לאלפיים ארבעים ושמונה פיקסלים. יש בממשק גם גלריית דוגמאות מוכנות שמאפשרת לבחון תוצאות מראש.

מתאים ל

  • חילוץ מודל מרשת

    יצירת קובץ גילבי להורדה מתוך תמונה שקופה, כולל הגדרת פישוט המודל ואיכות הטקסטורה.

  • בדיקת פרמטרים של טרליס

    שינוי ידני של צעדי דגימה ועוצמת הנחיה בשני שלבי העיבוד של המודל.

  • תצוגת סיבוב מקדימה

    צפייה באובייקט שנוצר כסרטון וידאו בלולאה לפני שמפיקים את הקובץ הסופי.

איפה זה נופל

הבעיה המרכזית היא שהחלל תקוע במצב של שגיאת ריצה, ולכן אי אפשר להשתמש בו ישירות כרגע. מעבר לזה, המודל מחייב תמונת ארג'יביאי עם ערוץ אלפא, כך שתמונות רגילות עם רקע מלא לא יעבדו בלי עיבוד מקדים. בנוסף, חומרת מעבד בסיסית חלשה מדי לעיבוד כזה של מודלים מורכבים.

שאלות
נפוצות

האם השימוש פתוח בחינם?

כן, העמוד פתוח לשימוש חופשי ואינו דורש תשלום. עם זאת, כרגע הוא במצב תקלה ולא מבצע חישובים בפועל. אם החלל יתוקן, הגישה דרך הדפדפן נשארת ללא עלות.

כמה זמן לוקח התהליך?

במצב הנוכחי שום דבר לא רץ בגלל שגיאת המערכת. במידה ויתוקן, הוא מוגדר על מעבד רגיל ללא מאיץ גרפי ייעודי, ולכן הרצה של שני שלבי המודל צפויה להיות ארוכה מאוד.

מה קורה לתמונות שמעלים לשם?

הקוד מפעיל פקודת מחיקת מטמון כל שש מאות שניות. התמונות שלכם עוברות דרך השרת לצורך העיבוד, ונמחקות מהזיכרון הזמני לפי הגדרה זו.

האם אפשר להריץ את זה על המחשב?

כן, הפרויקט מופץ עם רישיון MIT ומשתמש בקוד פתוח של טרליס. תוכלו לקחת את הקבצים ולהריץ אותם מקומית על מחשב עם מאיץ גרפי מתאים.

איך משתמשים

בפועל אתם גוררים תמונה, מכוונים את הפרמטרים אם רוצים ולוחצים על כפתור הייצור. כשהווידאו מוכן, לוחצים על כפתור החילוץ ומורידים את הקובץ. עם זאת, נכון לעכשיו העמוד מדווח על שגיאת ריצה ומוגדר על חומרת מעבד בסיסית, כך שלא ניתן להריץ אותו בהצלחה כרגע.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי כולל שינוי והפצה. הקוד כולל מנגנון שמוחק מטמון כל עשר דקות, מה שמנקה קבצים זמניים שנשמרים בשרת.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗