Envision

מה זה

המאגר מחולק לשישה קובצי JSON לפי נושאים מדעיים ותרבותיים: ביולוגיה, כימיה, פיזיקה, גיאוגרפיה, מטאורולוגיה והיסטוריה. בסך הכל יש בו בין אלף לעשרת אלפים רשומות, וכל רשומה מייצגת רצף של ארבעה שלבים עוקבים של תופעה או תהליך בעולם האמיתי.

בתוך כל קובץ, כל רשומה כוללת מזהה מספרי, קטגוריה, תחום ידע, ומערך מדויק של ארבעה שלבים. כל שלב מחזיק פרומפט טקסטואלי מפורט ליצירת הפריים הבודד, לצד הסבר אקדמי שמנמק את המעבר הסיבתי או החוק הפיזיקלי שמחבר בין השלב הנוכחי לשלב שקדם לו.

כרטיס הדאטהסט לא מפרט מאיפה הגיעו הטקסטים במקור, מי ניסח אותם בפועל או איזה תהליך סינון עברו הנתונים לפני שנכנסו לקבצים הסופיים. החלוקה מסודרת מאוד מבחינה היררכית, אך המקורות המדויקים של הפרומפטים וההסברים נותרו לא מתועדים.

מתאים ל

• הערכת עקביות ברצף תמונות

  בדיקה אם מודל תמונה שומר על קשר הגיוני ופיזיקלי לאורך סדרת שלבים של תופעה.

• בנצ'מרק מדעי למודלים

  הרצת סקריפט ההערכה כדי לדרג יכולת הבנה של תהליכים מורכבים בכימיה ובפיזיקה.

• אימון על פרומפטים רב-שלביים

  שימוש ברצפי התיאורים וההסברים המדעיים כדי לכוונן מודלים לייצור שלבים עוקבים.

איפה זה נופל

הטקסטים כולם באנגלית בלבד, ואין כאן שום תמיכה בעברית. המאגר מכיל רק פרומפטים והסברים טקסטואליים, בלי תמונות מוכנות מראש, כך שאתם חייבים לייצר את כל הפריימים בעצמכם. בנוסף, ההסתמכות המלאה על מודל שפה חיצוני לצורך הערכת הקוהרנטיות הפיזיקלית יכולה להכניס הטיות שיפוט משלה, והכרטיס כלל לא מסביר מי אימת את הדיוק המדעי של ההסברים.

איך טוענים

כדי להשתמש בנתונים משבטים את הריפו ישירות מגיטהאב או מהאגינג פייס באמצעות git clone. אין צורך באישור גישה או במפתחות מיוחדים כדי להוריד את קובצי ה־JSON הפשוטים. לפני שמתחילים כדאי לשים לב שריצת ההערכה הרשמית עם הסקריפט eval.py דורשת תמונות שכבר יצרתם ומפתח API פעיל של OpenAI עבור מודל gpt-4o, שישמש כשופט לבדיקת התוצאות.

from datasets import load_dataset

ds = load_dataset("OpenRaiser/Envision")

הרישיון

הפרויקט מופץ ברישיון MIT פתוח ומתירני. מותר להשתמש בו לצרכים מסחריים ומחקריים, לשנות אותו ולשלב אותו בכל פיתוח, בתנאי ששומרים על הודעת זכויות היוצרים והרישיון המקורי. אימון מודל על הנתונים אינו מחייב אתכם לחשוף את הקוד שלכם או להפיץ את המודל תחת אותו רישיון.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗