GPT
D

dpt-depth-estimation-3d-voxels

רץ בדפדפן

radamesרישיון לא דווח2022-04-15

  • gradio

הכלי מייצר מפת עומק מתמונה דו-ממדית והופך אותה למודל תלת-ממדי של ווקסלים. הוא מתאים למי שרוצה לבדוק הערכת עומק בלי לכתוב קוד.

  • הורדות בחודש
  • 118לייקים

מה זה

אתם מעלים תמונה רגילה וקובעים גודל ווקסל באמצעות מחוון שנע בין 5 ל־100, כאשר ערך ברירת המחדל עומד על 10. בתמורה מקבלים שלושה דברים: תמונה שמציגה את מפת העומק החזויה, תצוגה אינטראקטיבית של מודל תלת-ממדי, וקובץ gLTF מוכן להורדה של המבנה התלת-ממדי.

מאחורי הקלעים רץ המודל Intel/dpt-large שחוזה את העומק מתוך הפיקסלים, יחד עם ספריית open3d שמשחזרת את המידע לכדי רשת ווקסלים. בממשק יש גם תיקיית דוגמאות מוכנות מראש להרצה מהירה.

מתאים ל

  • הערכת עומק מתמונה

    הפקת מפת עומק חזותית מתמונת דו-ממד בעזרת המודל של אינטל.

  • יצירת מודל ווקסלים

    המרה של תמונה בודדת למודל תלת-ממדי מבוסס קוביות ווקסל.

  • ייצוא קובץ gLTF

    הורדת השחזור התלת-ממדי כקובץ gLTF לשימוש בתוכנות גרפיקה.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה שבורה ולא פועלת כרגע ב־Hugging Face עקב שגיאת בנייה. בנוסף, מדובר בהערכת עומק מתמונה בודדת שמתורגמת לווקסלים גסים, כך שאי אפשר לצפות לדיוק הנדסי או לשחזור של חלקים שלא נראים בתמונה המקורית. דוגמאות מוכנות עשויות להיראות נקיות, אבל תמונות מורכבות עם תאורה חלשה ייצרו עיוותים במודל הסופי.

שאלות
נפוצות

האם אפשר להשתמש באפליקציה עכשיו?

לא. האפליקציה נמצאת במצב שגיאת בנייה (BUILD_ERROR) בעמוד שלה, ולכן הממשק אינו נטען ואי אפשר להריץ אותה ברשת נכון לעכשיו.

האם השימוש בה עולה כסף?

הגישה להדגמה בדפדפן היא חינמית לחלוטין ואינה דורשת תשלום. עם זאת, היא מוקצית למעבד בסיסי בלבד.

האם אפשר להריץ את זה מקומית?

כן, הקוד הציבורי מבוסס על ספריות פתוחות כמו transformers ו־open3d. אפשר לקחת את הקוד מ־app.py ולהריץ אותו במחשב שלכם, ושם גם תוכלו לתקן את מה שמכשיל את הבנייה בשרת.

איך משתמשים

טוענים תמונה או בוחרים דוגמה, מכוונים את גודל הווקסל לפי הצורך ושולחים לעיבוד. כרגע לא תצליחו להריץ אותה בדפדפן כי השרת שלה נמצא במצב של שגיאת בנייה (BUILD_ERROR), כך שהממשק כלל אינו עולה. מעבר לזה, המערכת מוגדרת על מעבד בסיסי (cpu-basic), מה שאומר שעיבוד מודל כבד כזה על חומרה כזאת ייקח זמן ולא ירוץ חלק.

הרישיון

היוצר לא הגדיר רישיון לפרויקט. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי או להעתקת הקוד, וכל שימוש בתוצרים או בקבצים נשאר באזור אפור מבחינה משפטית.

הרישיון המלא ב־Hugging Face ↗