חדש Key אחד לכל המודלים, עם הערכת מחיר לפני כל קריאה. יוצרים Key

GPT
G

Graptoloidea-Specimens-Imaging

קוד פתוח

LeoZhangzaolincc-by-4.02024-02-18

  • graptoloidea
  • paleontology
  • specimens
  • fossils
  • biology

מאגר תמונות ומטא-דאטה של מאובני גרפטוליטים ממקורות פליאונטולוגיים. הוא מיועד למי שמפתח מודלים לזיהוי מורפולוגי של מאובנים וסיווג טקסונומי לפי שכבות גיאולוגיות.

  • 77הורדות בחודש
  • 34לייקים

מה זה

המאגר מכיל בין אלף לעשרת אלפים רשומות של מאובני יצורים ימיים קדומים מסדרת הגרפטוליטים, שנלקחו ממאגר פתוח ב־Zenodo שמספרו 6194943 ועובדו באמצעות סקריפט פייתון ייעודי. כל רשומה כוללת שיוך טקסונומי מלא מרמת תת-הסדרה, דרך משפחה וסוג ועד המין המדויק, יחד עם קישור לתמונת המאובן שנמצאת בגיטהאב. בנוסף ישנם נתונים סטרטיגרפיים כמו התקופה הגיאולוגית, גיל ממוצע במיליוני שנים, מיקום גיאוגרפי עם קואורדינטות וציטוט של המאמר המדעי שבו המאובן פורסם לראשונה.

הנתונים מחולקים לשלושה חלקים מוכנים מראש. שבעים אחוז מהרשומות מוקצות לסט האימון, חמישה עשר אחוז לסט הבדיקה וחמישה עשר אחוז נוספים מיועדים לוולידציה. המבנה מאפשר להריץ משימות סיווג תמונה או חיזוי של גיל ותקופה גיאולוגית על בסיס המאפיינים הוויזואליים של המאובן, כשהמטא-דאטה משמש לתיוג רב-שכבתי מדויק.

מתאים ל

  • סיווג טקסונומי של מאובנים

    אימון מודלי ראייה ממוחשבת לזיהוי סוגים ומינים של גרפטוליטים מתוך צילומי סלע.

  • הערכת גיל גיאולוגי

    חיזוי שכבות סטרטיגרפיות וגיל המאובן לפי מאפיינים מורפולוגיים שמופיעים בתמונה.

  • זיהוי עצמים במחקר

    איתור ותחימת חלקי המאובן בתוך שטח הסלע לתמיכה בעבודה פליאונטולוגית.

איפה זה נופל

איכות התמונות והרזולוציה שלהן אינן אחידות, והן תלויות בפרסומים המדעיים המקוריים שמהם נסרקו. המאגר מודה בהטיה שתלויה בשיטות פליאונטולוגיות עכשוויות וביכולת האבחנה של החוקרים שסיווגו את המאובנים במקור. יש תלות מוחלטת בקישורים חיצוניים, כך שאם קובץ תמונה יימחק מ־GitHub הרשומה תאבד ערך. כל הטקסטים והמונחים באנגלית ובלטינית בלבד, ואין ייצוג לעברית.

שאלות
נפוצות

האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?

כן, רישיון CC-BY-4.0 מתיר שימוש מסחרי מלא בנתונים. הדרישה היחידה היא לתת קרדיט נאות ליוצר המאגר ולציין קישור לרישיון. המודל שתאמנו על הנתונים אינו מחויב להיות בקוד פתוח.

האם קובצי התמונות מגיעים בהורדה ישירה עם הטבלאות?

לא, קובצי ה־Parquet כוללים רק כתובות אינטרנט של התמונות השמורות במאגר גיטהאב נפרד. תצטרכו להריץ סקריפט שמוריד ושומר את התמונות מקומית לפני תחילת האימון, ולוודא שהקישורים עדיין פעילים.

האם המאגר כולל תמיכה או נתונים בעברית?

המאגר אינו מכיל עברית כלל. כל השמות הטקסונומיים כתובים בלטינית, והשדות הגיאולוגיים וההפניות למקורות כתובים באנגלית. עבור משימות ראייה ממוחשבת השפה פחות משנה, אך התיוגים הם בינלאומיים.

מאיפה נאספו הנתונים במקור?

הנתונים מבוססים על מאגר פליאונטולוגי שפורסם ב־Zenodo שמקורו במחקרים מדעיים ובספרות מקצועית על מאובני גרפטוליטים, כולל ממצאים מאזורים כמו מחוז ג'ג'יאנג בסין. המידע עבר עיבוד והתאמה למבנה טבלאי.

איך טוענים

הנתונים מגיעים בשלושה קובצי Parquet מוכנים לחלוקות השונות. חשוב להבין שהתמונות עצמן לא שמורות בתוך הקבצים אלא מופיעות כקישורי רשת לקבצי תמונה ב־GitHub. כדי להתחיל לאמן תצטרכו להוריד את התמונות בקוד שלכם דרך הכתובות בעמודת ה־image. המאגר פתוח לגישה ציבורית ישירה ללא צורך באישור, ומכיל עמודות מפתח כמו תיאור המין, משפחה, קואורדינטות וגיל ממוצע.

from datasets import load_dataset

ds = load_dataset("LeoZhangzaolin/Graptoloidea-Specimens-Imaging")

הרישיון

המאגר מופץ תחת רישיון Creative Commons Attribution 4.0. הרישיון מאפשר שימוש חופשי לחלוטין, כולל שימוש מסחרי, שינוי של הנתונים ושילובם בכל מערכת, ובלבד שתתנו קרדיט הולם ליוצר המקורי ותציינו אם בוצעו שינויים. אין דרישה לשתף את המודל המאומן או את הנגזרות תחת אותו הרישיון, כך שמבחינה משפטית מותר לאמן עליו מודלים מסחריים סגורים בלי לחשוף את הקוד שלכם.

  • שימוש מסחרי
  • שינוי הקוד
  • חובת ייחוס

הרישיון המלא ב־Hugging Face ↗