GPT
O

One-2-3-45

רץ בדפדפן

One-2-3-45mit2023-07-08

  • docker

הכלי יוצר מודל תלת ממדי שלם מתמונה בודדת בתוך כארבעים וחמש שניות. הוא מיועד למי שצריך קובץ רשת גיאומטרי מהיר בלי לעבור תהליך אופטימיזציה ממושך.

  • הורדות בחודש
  • 408לייקים

מה זה

אתם מעלים תמונה אחת בפורמט סטנדרטי ומקבלים מודל תלת ממדי מרושת ומצופה במרקם. התהליך מבוסס על שילוב של מודל Zero-1-to-3 ליצירת תמונות מזוויות שונות, יחד עם Segment Anything שמחלץ את האובייקט, וכלי להערכת זווית המצלמה. במקום להריץ אופטימיזציה יקרה על כל צורה בנפרד, המערכת משחזרת את הגיאומטריה ישירות מההיטלים הרב כיווניים.

הממשק מציג את תמונות הזוויות שנוצרו ברקע, את פוזת המצלמה המשוערת, ומאפשר לצפות ברשת התלת ממדית ישירות בדפדפן. יש בו גם תיקיית דוגמאות מוכנות של חפצים שונים כדי לבחון את התוצאה לפני שמעלים קובץ עצמאי.

מתאים ל

  • יצירת קבצי GLB

    הפקת מודל תלת ממדי קל מתוך תמונת מוצר בודדת לשימוש ביישומי אינטרנט.

  • שחזור גיאומטרי מהיר

    קבלת רשת פוליגונים ראשונית לבדיקת נפח ופרופורציות בלי לעצב מודל מאפס.

  • חילוץ זוויות מבט

    יצירת שמונה היטלים של אותו אובייקט לצורך בחינת כיווני מצלמה שונים.

איפה זה נופל

הבעיה המיידית היא שההדגמה הרשמית נמצאת במצב שגיאת ריצה ואינה מתפקדת בענן. מעבר לזה, המודל מוגבל לאובייקטים בודדים על רקע מבודד, וחישוב הזוויות עלול לפספס באובייקטים מורכבים. אם התמונות שנוצרות על ידי Zero-1-to-3 סובלות מעיוותים, הרשת התלת ממדית הסופית תצא שבורה ומטושטשת.

שאלות
נפוצות

האם הכלי עובד כרגע בדפדפן?

לא. הדף מדווח על תקלת ריצה ולא מגיב לפעולות. כדי להשתמש בו צריך לשכפל את הקוד או את ה־Space ולהרים אותו בחומרה תקינה משלכם.

כמה זמן לוקח התהליך כשהוא רץ?

לפי נתוני הפיתוח, השחזור אורך כארבעים וחמש שניות. הזמן הזה תלוי ישירות במספר צעדי הדגימה ובמאיץ הגרפי שמריץ את החישוב.

האם ניתן להתקין ולהריץ את הקוד במחשב אישי?

כן, המאגר זמין בגיטהאב ומבוסס על סביבת Docker עם קוד פתוח תחת רישיון MIT. עם זאת, תצטרכו כרטיס מסך מתאים וחזק עם זיכרון מספק כדי להריץ את המודלים.

במה הכלי שונה מתוכנות סריקה תלת ממדיות?

הוא לא דורש וידאו או עשרות צילומים מכל צד. הוא מייצר את הזוויות החסרות בעצמו מתוך תמונה יחידה בעזרת מודל בינה מלאכותית.

איך משתמשים

טוענים תמונה, מכוונים בעזרת סליידרים את תיבת התיחום של האובייקט במידת הצורך, ולוחצים על כפתור ההרצה. בהגדרות המתקדמות אפשר לקבוע את מספר הצעדים וסולם ההנחיה, או לבחור ייצוא לקובץ GLB. המודל מסתמך על חומרת מאיץ L4 בודד וקוד פנימי של פרויקט המחקר. בעמוד הציבורי מדווחת כרגע שגיאת ריצה, ולכן אי אפשר להשלים יצירה ישירות דרך הדפדפן בלי לתקן את הסביבה או להריץ את הקוד עצמאית.

הרישיון

הקוד מופץ תחת רישיון MIT שמאפשר שימוש חופשי, העתקה והתאמה, כולל מטרות מסחריות, כל עוד שומרים על הודעת הרישיון המקורית. אין במאגר תיעוד לגבי שמירה או שימוש בתמונות שאתם מעלים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗