GPT
3

3D-Room-Layout-Estimation_LGT-Net

רץ בדפדפן

zhigangjiangmit2022-05-27

  • gradio

הכלי מנתח תמונות פנורמה של חללים פנימיים ומשחזר מתוכן מבנה חדר תלת ממדי. הוא מיועד לחוקרים, מתכננים ומפתחים שרוצים להוציא מודל גיאומטרי מתמונה רחבה אחת.

  • הורדות בחודש
  • 160לייקים

מה זה

אתם מעלים תמונת פנורמה בפורמט צבעוני, והמערכת מחזירה ויזואליזציה דו ממדית של קווי החדר יחד עם קובץ תלת ממדי שאפשר להוריד. בנוסף מקבלים קובץ נתוני נקודות מגוז, קובץ JSON של המבנה, ואפשרות לבחור סוגי קבצים תלת ממדיים כמו gltf, obj או glb.

מאחורי הממשק רץ מודל LGT-Net יחד עם Sunset1995/HorizonNet, שנעזרים בהגדרות אימון על בסיסי נתונים כמו mp3d ו־zind. הממשק כולל דוגמת ברירת מחדל מובנית ומאפשר לקבוע רזולוציות שונות וסוגי הנחות גיאומטריות כמו מנהטן או אטלנטה לצורך חישוב הקירות.

מתאים ל

  • שחזור חלל תלת ממדי

    המרת תמונת פנורמה יחידה לקובץ אובייקט תלת ממדי עבור תוכנות מידול והדמיה.

  • יצירת תוכנית רצפה דו ממדית

    חילוץ גבולות הקירות והרצפה לצורך הפקת סקיצה או קובץ נתונים של פריסת החדר.

  • ניתוח נקודות מגוז בצילום

    הפקת נתוני אוריינטציה מרחבית ונקודות מגוז מתוך החלל המצולם ישירות לקובץ.

איפה זה נופל

הבעיה המיידית היא שההדגמה שבורה לחלוטין ברשת עקב שגיאת בנייה, ולכן אי אפשר להשתמש בה כרגע דרך האתר. מעבר לכך, היא מוגבלת לצילומי פנורמה בלבד ולא מתאימה לתמונות רגילות של טלפון. אם החלל מורכב ולא עונה להנחות מבנה סטנדרטיות, החיזוי של הקירות עלול להתעוות.

שאלות
נפוצות

האם האפליקציה זמינה לשימוש כרגע?

לא, כרגע הממשק תקוע במצב שגיאת בנייה ולא ניתן להריץ עליו שום תמונה. מי שרוצה להשתמש במודל יצטרך להוריד את הקוד ולהריץ אותו באופן עצמאי.

האם השימוש בכלי עולה כסף?

לא, השימוש באתר הוא בחינם לחלוטין וללא צורך ברישום מוקדם. גם קוד המקור פתוח תחת רישיון חופשי.

אפשר להריץ את המודל על המחשב האישי?

כן, הקוד מבוסס על רישיון MIT וספריות פייתון סטנדרטיות, כך שניתן להוריד אותו מגיטהאב ולהריץ אותו מקומית. לצורך זה תצטרכו להוריד את המשקלים של המודלים ולהתקין את התלויות הדרושות.

מה ההבדל בין הממשק הזה למודל המקורי?

הממשק עוטף את המודלים LGT-Net ו־HorizonNet בטופס גרפי שמאפשר להוריד קבצים בקליק בלי לכתוב שורת קוד אחת. בפועל הוא רק מתווך בין התמונה שאתם שולחים לפקודות העיבוד שרצות מאחור.

איך משתמשים

טוענים תמונה, בוחרים אם להפעיל עיבוד מקדים, ומגדירים את סוג הקובץ והרזולוציה מתוך אפשרויות שנעות בין 128 ל־1024 פיקסלים. כרגע לא תצליחו להריץ אותה בדפדפן מפני שהיא נמצאת במצב של שגיאת בנייה ולא עולה. במקור היא הוגדרה לרוץ על מעבד רגיל בלבד ללא האצת מאיץ גרפי, מה שאומר שזמן החישוב המקורי היה איטי למדי.

הרישיון

הפרויקט מופץ תחת רישיון MIT שמאפשר שימוש חופשי בקוד, שינוי שלו ושילוב ביישומים מסחריים ופרטיים. לגבי התמונות שאתם מעלים, הן מועברות דרך השרת המארח של הממשק כדי לבצע את החישוב.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗