MMPR-v1.2

מה זה

המאגר מכיל דוגמאות של שאלות על תמונות לצד שתי תשובות אפשריות, אחת מועדפת ואחת דחויה. המבנה נועד לטכניקות יישור והעדפה כמו אופטימיזציית העדפות מעורבת. הרשומות כוללות נתיב לתמונה, שאילתת קלט, תשובה נבחרת ותשובה פסולה.

גרסה זו מוסיפה מקורות נתונים שלא היו בגרסאות הקודמות כדי להגדיל את הגיוון. היוצרים השתמשו בפרומפטים ייעודיים לייצור הדוגמאות, והנתונים מתמקדים במשימות תפיסה, ראייה מתמטית ומענה לשאלות מורכבות על בסיס גרפיקה וטקסט. הכרטיס אינו מפרט תהליכי סינון ידניים או מחיקות ספציפיות שנעשו מעבר להוספת המקורות החדשים.

מתאים ל

• אימון העדפות במודלי ראייה

  כוונון ישיר של מודלי שפה ותמונה בשיטות העדפה כדי לבחור תשובות נכונות ולהפחית שגיאות תפיסה.

• שיפור ביצועים במתמטיקה חזותית

  חיזוק היכולת של מודל לפתור בעיות היגיון וגרפים בעזרת דוגמאות ממוקדות הסקה.

• בלימת הזיות בניתוח תמונות

  שימוש בזוגות תשובות כדי לאמן מודלים לזהות במדויק מתי אובייקט לא מופיע בתמונה.

איפה זה נופל

הנתונים מוגדרים באנגלית בלבד ואין בהם תוכן בעברית. הכרטיס לא מציין בדיקות רעילות, הטיות חברתיות או סינון פרטיות מתוך מקורות התמונות. בנוסף, מודלים שמאומנים על העדפות נוטים לספוג טעויות שנוצרו בפרומפטים הסינתטיים, ולכן חובה לבדוק התאמה מול מבחני קצה מקומיים לפני שילוב בתשתיות ייצור.

אותה משפחה

MMPR יצא ב־3 גרסאות שיש להן עמוד כאן. אלה האחרות, לפי כמה מורידים אותן.

איך טוענים

המאגר מפורסם בגישה פתוחה וכולל שמונה קבצים, ללא צורך באישור מיוחד. קובצי התמונות מפוצלים למספר חלקים בשמות כמו images.zip_aa, images.zip_ab ו־images.zip_ac. לפני הפריסה צריך לאחד אותם לפקודת קובץ זיפ יחיד דרך שורת הפקודה ורק אז לפתוח אותו. קובצי הטקסט והתיוגים מגיעים בקובץ annotations.zip, והשדות החשובים לטעינה הם image, question, chosen ו־rejected.

from datasets import load_dataset

ds = load_dataset("OpenGVLab/MMPR-v1.2")

הרישיון

המאגר מתפרסם תחת רישיון MIT שמתיר שימוש מסחרי, עריכה והפצה, בתנאי ששומרים על הודעת זכויות היוצרים. הרישיון חל על הדאטהסט עצמו, אך הכרטיס מדגיש שחלקים מהפרויקט כוללים קוד ומודלים ממקורות חיצוניים הכפופים לרישיונות המקוריים שלהם.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗