SpatialLM-Testset
קוד פתוחmanycore-researchcc-by-nc-4.02025-03-16
ערכת מבחן שכוללת 107 ענני נקודות משוחזרים מווידאו יחד עם שרטוטי מבנה תואמים. היא מיועדת לבדיקת היכולת של מודלים להתמודד עם סריקות תלת-ממדיות רועשות במיוחד.
- 1,510הורדות בחודש
- 60לייקים
מה זה
המאגר מכיל 107 ענני נקודות מעובדים מראש בפורמט PLY וקובצי טקסט תואמים שמגדירים את שרטוט המבנה והאובייקטים. הנתונים לא הגיעו מחיישני עומק ייעודיים ונקיים, אלא שוחזרו ישירות מתוך סרטוני וידאו רגילים בעזרת כלי ה־SLAM בשם MASt3R-SLAM. בגלל מקור השחזור, המידע כולל רעשים גאומטריים והסתרות שטח שמקשים מאוד על פענוח המרחב לעומת סריקות RGBD רגילות.
המבנה הפנימי מחולק לתיקיות pcd עם קובצי ענני הנקודות ותיקיית layout עם הגדרות שרטוטי האמת. בנוסף ישנו קובץ test.csv שמחבר בין המזהים, הנקודות והשרטוטים, וטבלת benchmark_categories.tsv שמגדירה את מיפוי הקטגוריות לצורך הערכת הביצועים.
מתאים ל
- בנצ'מרק למודלי תלת-ממד
הערכת היכולת של מודלים לחלץ שרטוטי מבנה מתוך ענני נקודות רועשים.
- בדיקת עמידות לרעשי שחזור
בחינה איך אלגוריתמים מתמודדים עם שחזורי וידאו לעומת סריקות חיישן נקיות.
- השוואת ביצועים ל־SpatialLM
מדידת ביצועי שיטות פענוח מרחבי מול תוצאות המאמר המקורי.
איפה זה נופל
החיסרון הבולט הוא הגודל. 107 סצנות זה מעט מאוד, והמאגר מתאים אך ורק כמבחן השוואתי ולא לאימון מודלים. הנתונים מבוססים על שחזור מווידאו מונוקולרי, כך שרמת הרעש וההסתרות בענני הנקודות גבוהה במכוון. אין כאן טקסט בעברית, כל הקטגוריות והמיפויים מוגדרים באנגלית, ולא מפורט מאיזה סוגי חללים בדיוק נלקחו הסרטונים המקוריים.
שאלות
נפוצות
האם מותר להשתמש במאגר לפרויקט מסחרי?
לא. הרישיון הוא CC BY-NC 4.0, מה שאוסר כל שימוש מסחרי באופן מפורש. הוא מתאים למחקר אקדמי, לבדיקות פנימיות או להשוואת אלגוריתמים שאינם חלק ממוצר.
האם אפשר לאמן מודלים על הדאטהסט הזה?
לא מומלץ בכלל. המאגר מכיל רק 107 דוגמאות ונועד לשמש כסט מבחן. הוא קטן מדי לאימון ויגרום להתאמת יתר מיידית.
מה מייחד אותו מדאטהסטים אחרים של סריקות פנים?
רוב המאגרים בתחום מבוססים על מצלמות עומק שיוצרות ענני נקודות נקיים יחסית. כאן הנתונים הופקו מווידאו רגיל באמצעות MASt3R-SLAM, ולכן הם מלאים ברעש ומייצגים טוב יותר מידע שמגיע ממצלמות רגילות.
האם יש בו תמיכה בשפה העברית?
לא. שמות הקטגוריות, הקבצים והמיפויים מופיעים באנגלית בלבד. אין במאגר תוכן טקסטואלי חופשי שדורש תרגום, אבל שמות האובייקטים והמבנים הם באנגלית.
איך טוענים
המאגר פתוח להורדה ישירה ומכיל 222 קבצים. כדי לעבוד איתו צריך להשתמש בקוד הייעודי של פרויקט SpatialLM בגיטהאב. טוענים את קובצי ה־PLY באמצעות פונקציות מבוססות Open3D, ואת קובצי הטקסט קוראים בעזרת מחלקת Layout. למי שרוצה לראות את התוצאות בעיניים, המפתחים מספקים סקריפט שמייצא קובצי rrd להצגה חזותית באמצעות כלי Rerun.
from datasets import load_dataset
ds = load_dataset("manycore-research/SpatialLM-Testset")הרישיון
המאגר מופץ ברישיון cc-by-nc-4.0. המשמעות ברורה וחד-משמעית: השימוש מותר למחקר ולמטרות לא מסחריות בלבד, תוך מתן קרדיט מתאים. אם אתם בונים מודל או פיצ'ר שמיועדים למוצר מסחרי, אסור לכם להשתמש בנתונים האלה לבדיקות או לאימון.
- שינוי הקוד
- חובת ייחוס
- שימוש מסחרי: לא