DisasterM3
קוד פתוחKingdrone-Junjuecc-by-nc-sa-4.02025-10-17
מאגר מולטי מודלי של צילומי לוויין לפני ואחרי אסונות עם הוראות טקסטואליות. הוא מיועד למי שרוצה לאמן או לבחון מודלי ראייה שפה על הערכת נזקים ומענה לאסונות טבע ואדם.
- 1,931הורדות בחודש
- 23לייקים
מה זה
המאגר כולל 26,988 צילומי לוויין כפולים בזמן, לפני ואחרי האירוע, לצד 123 אלף צמדי הוראות באנגלית. הנתונים מתעדים 36 אסונות היסטוריים בחמש יבשות, ומחולקים לעשרה סוגי אסונות שונים. המידע החזותי מבוסס על חיישנים אופטיים לצד מכ"ם מִפְתָּח סינתטי מסוג SAR, שמאפשר לראות דרך עננים ומזג אוויר קיצוני לאחר הפגיעה.
הבסיס לחומרים נשען על הרחבה ועיבוד של שני מקורות קיימים, xBD ו־BRIGHT, כאשר החוקרים הוסיפו משימות חשיבה ותפיסה חזותית. יש כאן חלוקה לערכת הוראות ששוחררה לאימון ולערכת מבחן ביצועים נפרדת, שכוללת קובצי JSON ומסכות סגמנטציה בפורמט תמונה לאירועים ספציפיים כמו הוריקנים והצפות.
מתאים ל
- הערכת נזקי מבנים בלוויין
אימון מודלים להשוואת תצלומי לפני ואחרי כדי לזהות הרס פיזי.
- מענה לשאלות על אזורי אסון
בניית VLM שמנתח תצלומי מכ"ם ועונה על שאלות חילוץ והצלה.
- מיפוי הצפות וסגמנטציה
זיהוי אוטומטי של שטחים מוצפים באמצעות מסכות ייעודיות.
- בנצ'מרק למודלי שפה חזותיים
בדיקת יכולות ההסקה של מודלים גדולים בתנאי שטח מורכבים.
איפה זה נופל
כל הטקסט וההוראות כתובים באנגלית בלבד, כך שאין שום תמיכה מובנית בעברית או בניתוח דוחות מקומיים. המאגר מוגבל גאוגרפית ל־36 אירועים ספציפיים בעולם, ואם האסון שאתם חוקרים שונה במאפייני הקרקע או הבינוי שלו, המודל יתקשה להכליל. בנוסף, מדובר בצילומי לווין הדורשים שילוב של SAR, פורמט שלא כל מודל ויזואלי סטנדרטי יודע לעכל בלי התאמות מוקדמות.
שאלות
נפוצות
האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?
לא. הרישיון הוא CC BY-NC-SA 4.0 והיוצרים מדגישים שהשימוש מותר למטרות אקדמיות בלבד. כל שימוש מסחרי אסור במפורש.
האם יש במאגר נתונים בעברית?
לא, כל צמדי ההוראות והשאלות כתובים באנגלית. כדי לעבוד בעברית תצטרכו לתרגם את השאלות או להסתמך על יכולת התרגום הפנימית של המודל שתריצו.
מאיפה נאספו התמונות והנתונים?
המאגר מבוסס על שילוב והרחבה של מאגרי אסונות קיימים בשם xBD ו־BRIGHT. היוצרים בנו סביבם 123 אלף הוראות ומשימות הסקה חדשות ל־36 אירועי עבר בחמש יבשות.
במה הוא שונה ממאגרי לוויין רגילים?
הוא כולל צילומים כפולים של לפני ואחרי האירוע ומשלב חיישני SAR יחד עם צילום אופטי. בנוסף הוא מובנה במיוחד למודלי ראייה שפה עם הוראות טקסטואליות ולא רק תגיות סיווג.
איך טוענים
המאגר ציבורי ופתוח להורדה בלי צורך בהרשאה מוקדמת דרך האגינג פייס או הקוד בגיטהאב. המבנה כולל מעל 22 אלף קבצים, בהם קובץ benchmark_release.json לצד תיקיות של מסכות PNG לסגמנטציה. החוקרים מספקים סקריפט פייתון ייעודי להרצת מודלים כמו Qwen2.5-VL או InternVL3 דרך vLLM לפי תתי קבוצות, למשל bearing_body או report.
from datasets import load_dataset
ds = load_dataset("Kingdrone-Junjue/DisasterM3")הרישיון
הרישיון הוא CC BY-NC-SA 4.0, מה שאומר איסור מוחלט על שימוש מסחרי. החומרים מיועדים למחקר בלבד, מחייבים מתן קרדיט מלא ליוצרים, וכל נגזרת או מודל שתאמנו על בסיסו חייבים להיות מופצים תחת אותם תנאים מגבילים. לחברות שמחפשות דאטה למוצר מסחרי, זה חסום לגמרי.
- שינוי הקוד
- חובת ייחוס
- שימוש מסחרי: לא