gaia
קוד פתוחsiril-spccgpl-3.02026-03-01
מדובר בחילוץ ממוקד מקטלוג Gaia DR3 לכיול צבע ספקטרופוטומטרי בעיבוד תמונות אסטרונומיות. הוא מספק פיזור כוכבים אחיד בשמיים בלי להעמיס נתונים מיותרים מאזורים צפופים.
- 450,281הורדות בחודש
- 17לייקים
מה זה
הנתונים נלקחו ישירות מקטלוג Gaia DR3 של סוכנות החלל האירופית, ועברו סינון מכוון כדי להתאים לעבודה עם תוכנת Siril 1.4. במקום לקחת את כל השמיים כמו שהם, המאגר מחולק לפי אינדקס HEALpix ברמה 8, וכולל לכל היותר את 127 הכוכבים הבהירים ביותר בכל תא כזה. המטרה של הסינון הזה היא לייצר צפיפות מאוזנת של מקורות אור, בלי להציף את המערכת במידע כבד באזורים שבהם יש ריכוז כוכבים גבוה.
המאגר מפוצל ל 48 קובצי מידע בינאריים עם סיומת dat, שכל אחד מהם מייצג אזור ברמה 1 של HEALpix, כפי שמסומן בסוף שם הקובץ. הרשומות עצמן כוללות רק כוכבים שיש עבורם נתוני xp_sampled זמינים מקטלוג Gaia המקורי, ולכן באזורים מסוימים יש פחות כוכבים מהתקרה שנקבעה מראש.
מתאים ל
- כיול צבע אסטרונומי
כיול ספקטרופוטומטרי של צבעי כוכבים בצילומי שמיים עמוקים לפי מקורות מכוילים של Gaia.
- אימות עיבוד תמונה בסיריל
מאגר ייחוס מקומי ומהיר לעבודה מול גרסאות Siril 1.4 ללא תלות בחיבור רשת.
- בדיקת אלגוריתמי זיהוי שדה
השוואת מיקומי כוכבים בהירים בשדה ראייה נתון מול פריסת HEALpix אחידה ומדויקת.
איפה זה נופל
זה לא קטלוג אסטרונומי שלם ומעמיק, אלא סט מסונן באופן אגרסיבי שמתאים רק לכיול צבע. הסינון חותך החוצה כוכבים חלשים ומגביל את הכמות ל 127 כוכבים לתא, כך שהוא לא מתאים לאימון מודלים שצריכים לזהות עצמים חיוורים או למפות צפיפות אמיתית בחלל. בנוסף, אם אין למקור נתוני ספקטרום מסוג xp_sampled הוא פשוט נזרק, מה שיוצר חורים בכיסוי באזורים מסוימים.
שאלות
נפוצות
האם מותר להשתמש בדאטהסט הזה במוצר מסחרי?
המבנה והאריזה מוגדרים תחת רישיון GPL-3.0, מה שאומר שאם אתם משלבים את הקבצים או נגזרות שלהם במוצר, ייתכן שתצטרכו לשחרר את הקוד שלכם תחת אותו רישיון. הנתונים עצמם כפופים בנוסף לכללי השימוש של Gaia DR3 של סוכנות החלל האירופית.
איך אפשר לפתוח ולקרוא את קובצי המידע?
הנתונים לא שמורים בפורמט CSV או פרקט אלא ב 48 קובצי dat בינאריים ייעודיים. הפורמט שלהם מוגדר במסמך ייעודי בזנודו שמקושר בכרטיס, והם נבנו מראש כדי להיקרא בצורה יעילה על ידי התוכנה Siril.
האם המאגר מכיל טקסט או נתונים בעברית?
לא. מדובר בנתונים אסטרונומיים טהורים שמכילים קואורדינטות, מדידות בהירות ונתונים ספקטרופוטומטריים של גרמי שמיים, ללא שום רכיב טקסטואלי או שפתי.
מה ההבדל בין המאגר הזה לבין קטלוג Gaia המקורי?
קטלוג Gaia DR3 המלא מכיל מאות מיליוני מקורות וכמויות עצומות של מידע כבד. כאן בוצע חילוץ בררני שמשאיר לכל היותר 127 כוכבים בהירים בכל תא HEALpix ברמה 8, ורק כאלה שיש להם דגימות ספקטרום, במטרה ליצור קובץ קל ומאוזן לכיול צבע בלבד.
איך טוענים
אין כאן טבלאות רגילות ולא טוענים את זה עם פנדס. המאגר מכיל 52 קבצים, כולל קובצי בדיקת תקינות SHA256SUMS ו 48 קובצי מידע בפורמט dat ייעודי שהמבנה הפנימי שלו מתועד בזנודו. הגישה חופשית לגמרי ואין צורך לבקש הרשאות מיוחדות, אך כדי לקרוא את הנתונים האלה בקוד שלכם תצטרכו לממש מפענח לפי המפרט הבינארי או לעבוד ישירות דרך הכלים של Siril.
from datasets import load_dataset
ds = load_dataset("siril-spcc/gaia")הרישיון
הרישיון המדווח הוא GPL-3.0, אבל יש כאן פיצול שחשוב להבין. הרישיון של הקוד הפתוח חל רק על המבנה, האינדוקס והאריזה של הקטלוג. נתוני התצפית עצמם שייכים לסוכנות החלל האירופית וכפופים למדיניות השימוש של Gaia DR3, כולל חובת ציטוט בעבודה אקדמית. שימוש מסחרי במבנה הנתונים מחייב פתיחת קוד תחת אותו רישיון.