MegaDepth-X
קוד פתוחy-u-a-n-l-iרישיון לא דווח2026-03-04
תמונות רשת של אתרים אמיתיים עם שחזורי תלת ממד ועומק צפוף. המאגר נבנה במיוחד לאימון מודלים על סצנות דלילות, רועשות ומאתגרות במקום צילומים צפופים ומושלמים.
- 878הורדות בחודש
- 18לייקים
מה זה
המאגר מציג מבנה מבוסס סצנות מאתרים מפורסמים בעולם, כמו מרכז רוקפלר או קתדרלת אאכן, שנאספו במקור ממאגרי תמונות ברשת ומבוססים על נתוני ויקישיתוף ופרויקט MegaScenes. המטרה כאן היא להתמודד עם הזנב הארוך של שחזור תלת ממד, שבו רוב הצילומים מהעולם האמיתי אינם מכסים את האובייקט מכל זווית בצורה אידיאלית.
התוכן מאורגן בארכיוני tar.gz לפי סצנות. בתוך כל ארכיון יש רכיבי שחזור ממוספרים, וכל רכיב מכיל תמונות RGB מקוריות, מפות עומק דחוסות בפורמט npz שמתאימות במדויק לשמות התמונות, וקבצי שחזור דליל בינאריים של COLMAP הכוללים מצלמות, פריימים ונקודות תלת ממד. במקביל, המאגר מספק קובץ רישיונות בפורמט Parquet שממפה כל תמונה למקור שלה.
מתאים ל
- אימון שחזור בתנאי דלילות
פיין-טיונינג למודלי תלת ממד שצריכים להרכיב מבנה גאומטרי ממספר קטן של תמונות שאינן חופפות היטב.
- הערכת מודלי עומק גנריים
בדיקת ביצועים של מודלי חיזוי עומק מול מפות עומק צפופות של מבנים מורכבים בעולם האמיתי.
- מחקר התמודדות עם סימטריה
אימון אלגוריתמי התאמת מצלמות וכיול זוויות בסביבות בעלות מאפיינים ארכיטקטוניים חוזרים ומבלבלים.
איפה זה נופל
הנתונים מתמקדים במבנים ואתרים מוכרים מהעולם, ללא נתונים מותאמים לישראל או טקסטים בעברית. הבעיה העיקרית היא חוסר עקביות בחלק מהשחזורים. היוצרים מציינים במפורש שחלק מרכיבי השחזור חסרים תמונות ביחס לרישומי המקור, מכיוון שהם נאלצו להסיר תמונות שלא עמדו ברישיונות פתוחים. בנוסף, המאגר מדמה בכוונה תנאי קיצון של דלילות, סימטריה ואי-ודאות, כך שהוא פחות מתאים למי שמחפש כיסוי צילום מלא וחלק של סצנה.
שאלות
נפוצות
האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?
חלקי השחזור וענני הנקודות ניתנים תחת רישיון CC-BY 4.0 שמתיר שימוש מסחרי עם מתן קרדיט. מנגד, התמונות המקוריות מגיעות תחת רישיונות מגוונים מוויקישיתוף. חובה להריץ סקריפט על קובץ license.parquet ולסנן החוצה כל תמונה עם רישיון שאינו מסחרי לפני האימון.
איך המאגר נאסף וסונן?
התמונות נלקחו מאוספי רשת של ויקישיתוף בהמשך לפרויקט MegaScenes. החוקרים הפיקו שחזורי COLMAP ומפות עומק צפופות, והפעילו דגימה שמדמה זוויות דלילות וקשות. בנוסף הם הסירו ידנית סצנות ותמונות שלא תאמו תנאי רישוי פתוחים או מחקריים.
מה ההבדל בין מאגר זה למאגרי שחזור תלת ממד רגילים?
רוב מאגרי הראייה הממוחשבת מציעים סצנות שמצולמות בצפיפות גבוהה ומכל זווית אפשרית. המאגר הזה מתמקד במכוון בבעיית הזנב הארוך, שבה תמונות הרשת מגיעות ממצלמות שונות, בתנאי תאורה משתנים ועם מעט מאוד חפיפה בין תמונה לתמונה.
האם יש במאגר אתרים או צילומים מישראל?
הכרטיס מציג דוגמאות לאתרים מפורסמים בחו״ל כמו מרכז רוקפלר בניו יורק או קתדרלת אאכן. אין התייחסות ספציפית לישראל בכרטיס, אך מכיוון שהמקור הוא תמונות מוויקישיתוף, ייתכן שקיימים אתרים מקומיים בתוך אלפי הקבצים ויש לחפש אותם לפי קטגוריה בטבלת הרישיונות.
איך טוענים
הנתונים מחולקים לארכיוני סצנות תחת תיקיית release, לצד קובץ license.parquet בתיקיית license ומשקולות מודלים תחת ckpts. אין צורך באישור גישה מיוחד כדי להוריד. פריקת כל קובץ tar.gz יוצרת תיקיות עם תמונות, קבצי עומק בפורמט npz וקבצי מצלמות בינאריים של COLMAP. קובץ ה־Parquet מכיל את שמות הקבצים, הקטגוריות ותנאי השימוש, ואפשר לקרוא אותו ישירות עם Pandas או Polars כדי לסנן תמונות לפני הטעינה.
from datasets import load_dataset
ds = load_dataset("y-u-a-n-l-i/MegaDepth-X")הרישיון
הרישיון של המאגר הראשי לא דווח בצורה אחידה בכרטיס. נכסי השחזור, כולל מפות העומק ומודלי ה־SfM, מפורסמים תחת רישיון CC-BY 4.0 שדורש ייחוס בלבד. עם זאת, התמונות עצמן מגיעות עם רישיונות נפרדים שמפורטים בקובץ ה־Parquet המצורף. אי אפשר להשתמש במאגר באופן מסחרי עיוור בלי לבדוק ולסנן קודם את רישיון המקור של כל תמונה.