Depth-Pro-in-Meters

מה זה

מעלים קובץ תמונה רגיל ומקבלים מפת עומק ויזואלית, אורך מוקד משוער בפיקסלים, וקובץ נתונים גולמיים בפורמט CSV עם ערכי עומק במטרים. בנוסף אפשר לבנות ישירות בממשק מודל תלת ממדי שמציג את הסצנה, ולהוריד אותו כקובץ OBJ יחד עם הטקסטורה כקובץ PNG.

מאחורי הקלעים רץ המודל apple/DepthPro, מודל שמבצע הערכת עומק מתמונה בודדת ללא צורך בנתוני מצלמה מקדימים. מדובר בגרסת קוד שפותחה במקור על בסיס המחקר של אפל, והותאמה כאן במיוחד כדי לחשוף את ערכי המרחק המטריים בפועל ולבנות מהם רשת מצולעים באמצעות trimesh.

מתאים ל

• חילוץ מפת עומק מטרית

  הורדת קובץ CSV עם מדידות מרחק במטרים ישירות מתוך צילום בודד.

• יצירת רשת תלת ממדית

  הפקת קובץ OBJ וטקסטורה לתצוגה מהירה או עיבוד בתוכנות גרפיקה.

• הערכת אורך מוקד

  חישוב אוטומטי של אורך המוקד בפיקסלים ללא צורך בנתוני EXIF.

איפה זה נופל

זהו מימוש ייחוס שעבר אימון מחדש ולא המודל המדויק ממאמר המחקר המקורי. המדידה במטרים היא הערכה חישובית בלבד מתמונה בודדת, ולכן לא הייתי מסתמך עליה לצורכי הנדסה, בנייה או מדידות שדורשות דיוק מוחלט. בנוסף, יצירת מודל תלת ממדי מסובך עשויה להכביד על הדפדפן אם לא משתמשים במחווני הפישוט וההחלקה.

איך משתמשים

גוררים תמונה לשדה הקלט וממתינים להרצה שמפיקה את מפת העומק ואת אורך המוקד. לאחר מכן לוחצים על כפתור יצירת מודל התלת ממד, שבו ניתן לשחק עם מחווני פישוט, החלקה, הסרת אזורים דקים וחיתוך פאות. ההרצה מתבצעת על גבי חומרת ענן מסוג zero-a10g, מה שאומר שהעיבוד עצמו אמור להסתיים תוך שניות בודדות, אך ייתכן שתצטרכו להמתין שניות אחדות להקצאת המעבד הגרפי בעת ההפעלה.

הרישיון

הרישיון לא דווח בעמוד של המרחב עצמו. מאגר הקוד והמשקולות המקוריים שוחררו תחת תנאי שימוש נפרדים שלא צוינו במלואם בטקסט, ולכן אין להסתמך על הכלי לשימוש מסחרי חופשי בלי לבדוק את התנאים במאגר המקורי.

הרישיון המלא ב־Hugging Face ↗