חדש Key אחד לכל המודלים, עם הערכת מחיר לפני כל קריאה. יוצרים Key

GPT
P

PEACE

קוד פתוח

microsoftmit2024-08-09

  • geology
  • geologic_map
  • benchmark

microsoft עומדים גם מאחורי Sho, ויש עליו סקירה כאן.

המאגר כולל מפות גאולוגיות ברזולוציה גבוהה לצד שאלות מרובות ברירה, השלמת משפטים ופתוחות. הוא נבנה במטרה לבחון יכולות פענוח והסקה חזותית מורכבת במודלי שפה ותמונה.

  • 336הורדות בחודש
  • 22לייקים

מה זה

הנתונים מתבססים על 124 מפות גאולוגיות שנסרקו ברזולוציה ממוצעת של 6,146 על 6,146 פיקסלים, ועליהן נבנו 3,864 שאלות ותשובות מתויגות. המפות הגיעו משני מקורות רשמיים, הסקר הגאולוגי האמריקאי והסקר הגאולוגי הסיני. המידע מחולק ל־25 משימות מוגדרות שבודקות חמש יכולות מרכזיות של מודלים: חילוץ נתונים, עיגון במרחב, התייחסות לאלמנטים ספציפיים, הסקה לוגית וניתוח נתונים גאולוגיים.

המבנה של כל רשומה כולל את נתיב קובץ התמונה, סוג המשימה, השאלה עצמה והתשובה הנכונה. בחלק ניכר מהמקרים יש ארבע אפשרויות בחירה וציון בוליאני האם מדובר בשאלה אמריקאית. לצד שאלות הבחירה, המאגר מכיל גם שאלות של מילוי חסר ושאלות פתוחות, כשכל פריט מכוון לבדיקת הבנה של סוגי סלעים, שטחים ותצורות קרקע מתוך המפות המורכבות.

מתאים ל

  • הערכת מודלי ראייה

    בדיקת יכולת המודל לפענח תרשימים גיאוגרפיים מורכבים ברזולוציה גבוהה.

  • מענה לשאלות על מפות

    אימון ובחינת סוכני בינה מלאכותית בהשוואת שטחים וזיהוי תצורות קרקע.

  • חילוץ מידע גיאולוגי

    בדיקת אלגוריתמים לחילוץ שמות סלעים ומקרא מתוך מסמכי סקר ישנים.

איפה זה נופל

הטקסט של השאלות מוגדר באנגלית, והמפות הגיאוגרפיות מוגבלות לארצות הברית ולסין בלבד. אין כיסוי לאזורים אחרים בעולם או מיפוי בעברית. רזולוציית התמונות גבוהה מאוד ומאתגרת מודלים סטנדרטיים, מה שמסביר למה GPT-4o קיבל בו ציון נמוך של 0.369 לעומת סוכן ייעודי. בנוסף, מדובר במאגר קטן של 124 תמונות בלבד שמתאים בעיקר להערכת ביצועים ולא לאימון מלא של מודל מאפס.

שאלות
נפוצות

האם מותר להשתמש במאגר למוצר מסחרי?

כן, המאגר משוחרר תחת רישיון MIT שמתיר שימוש מסחרי מלא. אתם יכולים להעריך באמצעותו מערכות או לפתח כלים על בסיסו, כל עוד אתם שומרים על הקרדיט ונוסח הרישיון המקורי.

האם יש במאגר מפות או שאלות בעברית?

לא, השאלות והתשובות מנוסחות באנגלית. המפות עצמן נלקחו מארצות הברית ומסין, כך שאין בו תכנים בעברית או ייצוג גאולוגי לאזור ישראל.

כמה קבצים כולל המאגר בפועל?

הוא כולל 130 קבצים, מתוכם 124 תמונות של מפות גאולוגיות. התמונות מגיעות ברזולוציה ממוצעת של 6,146 על 6,146 פיקסלים ולכן הן שוקלות לא מעט.

איך נאספו השאלות?

השאלות נבנו סביב המפות של שני מכוני מחקר רשמיים, הסקר האמריקאי והסקר הסיני. הן חולקו ל־25 משימות שונות שמודדות חמש מיומנויות חזותיות ולוגיות שונות.

איך טוענים

טוענים את הנתונים ישירות מספריית הקוד של הפרויקט או מורידים את קובצי התמונות מקטלוג המאגר, המכיל 130 קבצים. התמונות שמורות בפורמט גרפי כבד שדורש עיבוד מוקדם עקב הרזולוציה הגבוהה שלהן, ולא נדרש תהליך אישור גישה כלשהו כדי להוריד אותן. ברשומות הטקסט השדות החשובים לעבודה הם הנתיב לתמונה, השאלה, האפשרויות והסיווג שמציין את סוג המשימה והיכולת הנדרשת.

from datasets import load_dataset

ds = load_dataset("microsoft/PEACE")

הרישיון

המאגר מופץ תחת רישיון MIT. מותר להשתמש בו לצרכים מסחריים ומחקריים, לשנות אותו, להפיץ אותו ולשלב אותו בתוך מוצרים סגורים. הדרישה היחידה היא לשמור על הודעת זכויות היוצרים ונוסח הרישיון המקורי, והוא אינו מחייב אתכם לחשוף מודלים שאומנו עליו.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗