Pixel-Perfect-Depth

מה זה

אתם מעלים תמונת RGB רגילה, בוחרים כמה צעדי ניקוי רעש להריץ, ומקבלים מפת עומק, תצוגת תלת ממד אינטראקטיבית וקובץ להורדה. יש בממשק גם דוגמאות מוכנות מראש מתוך תיקיית הנכסים, כך שאפשר לבדוק את התוצאות מיד בלי להעלות קובץ שלכם.

מאחורי הקלעים הקוד משלב את המודל Pixel-Perfect Depth יחד עם מודלים נוספים כמו Depth Anything V2 Large ו־MoGe v2. הצירוף הזה מחשב את העומק של הפיקסלים, מבצע התאמה מטרית בעזרת RANSAC, וממיר את התוצאה לענן נקודות שמוצג ישירות בחלון 3D ייעודי.

מתאים ל

• המרת תמונה לענן נקודות

  יצירת קובץ תלת ממד להורדה ולצפייה ישירה מתוך צילום בודד.

• הפקת מפות עומק

  חילוץ מפת עומק מדויקת שמתאימה לעיבוד תמונה ואפקטים ויזואליים.

• הערכת גאומטריה מטרית

  שחזור עומק מטרי בעזרת התאמת RANSAC וסינון נקודות רועשות.

איפה זה נופל

הבעיה המיידית היא שההדגמה במצב מושהה ולא פעילה כרגע. מעבר לכך, מדובר בהערכת עומק מתמונה בודדת, כך שאזורים מוסתרים או השתקפויות מורכבות לא ייצרו גאומטריה אמיתית מאחורי עצמים. בנוסף, הדוגמאות המוכנות לא נשמרות מראש בזיכרון מטמון, כך שכל בדיקה דורשת חישוב מלא.

איך משתמשים

טוענים תמונה, פותחים את ההגדרות אם רוצים לשנות את מספר צעדי הניקוי מברירת המחדל של עשרים או לבטל את סינון הנקודות, ולוחצים על כפתור התחזית. השרת רץ על מאיץ גרפי zero-a10g, אבל כרגע המופע מוגדר במצב מושהה ולכן אי אפשר להריץ אותו ישירות בדפדפן עד שהמנהל יפעיל אותו מחדש.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי וגם מסחרי בקוד. הקבצים שאתם מעלים מעובדים דרך שרתי הממשק ומשתמשים בספריות זמניות בצד השרת.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗