ZoeDepth

מה זה

אתם מעלים תמונה דו ממדית רגילה או תמונת פנורמה של 360 מעלות, ומקבלים מפת עומק או ייצוג תלת ממדי של הסצנה. הממשק מחולק לשלוש לשוניות נפרדות, אחת לחיזוי עומק פשוט, שנייה להמרת תמונה רגילה לאובייקט תלת ממדי, ושלישית לטיפול בתמונות פנורמיות מלאות.

מאחורי הקלעים רץ המודל ZoeDepth, שמחבר בין הערכת עומק יחסי לבין עומק מטרי מדויק בהעברה ישירה. הקוד משתמש בספריית torch לעיבוד ומסתמך על חלוקת העבודה הזו כדי להוציא תוצאות עומק בלי צורך בכיול מקדים של המצלמה שצילמה את התמונה המקורית.

מתאים ל

• הפקת מפות עומק מתמונות

  מעלים צילום רגיל כדי לחלץ נתוני מרחק מטריים לכל פיקסל בסצנה.

• בניית מודל תלת ממד מתמונה

  הופכים תמונה בודדת לייצוג תלת ממדי לצורכי תצוגה או פיתוח.

• עיבוד פנורמות 360

  טוענים צילום סביבתי מלא ומקבלים נפח ומרחב תלת ממדי של החלל.

איפה זה נופל

כרגע הדף נמצא במצב שגיאת ריצה, ולכן אי אפשר להריץ אותו ישירות בדפדפן בלי שיתוקן. מעבר לזה, המרת תמונה שטוחה או פנורמה למודל תלת ממדי היא שחזור מבוסס הערכה, ולא סריקת לייזר אמיתית, כך שלא כדאי להסתמך על המידות לייצור פיזי או לתכנון הנדסי מדויק.

איך משתמשים

גוררים תמונה ללשונית המתאימה ולוחצים על כפתור ההרצה כדי לקבל את התוצאה. האפליקציה רצה על חומרת zero-a10g, מה שמספק כוח עיבוד גרפי חזק, אבל יש תור ציבורי שעשוי לעכב את הביצוע. יוצר הכלי מציע לשכפל את הספייס לחשבון האישי כדי לעקוף את ההמתנה בתור.

הרישיון

הקוד מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי, העתקה, שינוי ושילוב בפרויקטים פרטיים ומסחריים. תנאי השימוש הרגילים לגבי שמירת קבצים שהועלו ברשת תלויים בהגדרות השרת המארח.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗