DA-2

מה זה

ההדגמה הזו מריצה את DA-2, מודל שנועד להעריך עומק מכל כיוון. בפועל, אתם מעלים תמונת מקור ומסכה שמתאימה לה, או בוחרים מתוך עשרים הדוגמאות המוכנות שמגיעות מובנות בתוך העמוד.

מאחורי הקלעים הקוד משתמש בספריות כמו PyTorch, trimesh ו־OpenCV. הוא לוקח את המידע שהוזן, מחשב את מרחקי העומק בעזרת המודל הייעודי, וממיר את הנתונים לענן נקודות תלת ממדי. בנוסף, הממשק מחזיר סליידר תמונות שמאפשר להשוות ישירות בין התמונה המקורית לצביעת מרחקי העומק.

בסיום העיבוד מופיעים שני רכיבים מרכזיים, רכיב Model3D להצגת ענן הנקודות בתלת ממד וסליידר להשוואה חזותית. זה מאפשר לראות מיד איך האלגוריתם פירש את המרחב והעצמים שנמצאים מול המצלמה.

מתאים ל

• הערכת עומק מתמונה

  בודקים כיצד המודל מחשב מרחקים והפרשי עומק מתוך תמונה קיימת ומסכה.

• יצירת ענני נקודות

  מייצרים ענן נקודות תלת ממדי לצפייה אינטראקטיבית ישירות מתוך הדפדפן.

• בדיקת ביצועים השוואתית

  משווים בין התמונה המקורית למפת העומק שנוצרה בעזרת רכיב הסליידר.

איפה זה נופל

הממשק דורש מסכה לצד התמונה כדי לחשב את העומק, כך שאי אפשר סתם לזרוק אליו תמונה גולמית בלי הכנה מוקדמת. בנוסף, הממשק מציג ענן נקודות תלת ממדי ולא מודל מרושת שלם, מה שאומר שלא תקבלו כאן קובץ גיאומטרי מושלם לשימוש מיידי בהדפסה או במשחקים.

איך משתמשים

גוררים תמונה ומסכה לשדות המתאימים בממשק, או מקליקים על אחת הדוגמאות בעמוד, ולוחצים על כפתור ההרצה. מאחר שהמערכת מוגדרת על חומרת zero-a10g, המעבד הגרפי מתעורר לפי דרישה. ייתכן שתצטרכו להמתין שניות ספורות כשהכרטיס נטען, במיוחד אם יש משתמשים נוספים באותו רגע.

הרישיון

הקוד וההדגמה מפורסמים תחת רישיון apache-2.0. הרישיון הזה מתיר שימוש חופשי, שינוי והפצה, כולל שימוש מסחרי בקוד. לגבי התמונות שאתם מעלים, הן מועברות לעיבוד בשרתי השרת שמארח את ההדגמה.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗