BlenderBench

מה זה

המאגר מכיל 27 דוגמאות בלבד, שמחולקות באופן שווה לשלוש רמות קושי. רמה אחת כוללת תשע משימות של התאמת מצלמה, רמה שתיים מציעה תשע משימות עריכה מורכבות יותר בכמה שלבים, והרמה השלישית משלבת בין השתיים. הסצנות נבנו מנכסים של בלנדר סטודיו, בלי איסוף גולמי מהרשת או גרידה המונית.

כל רשומה בנויה סביב קובץ בלנד תלת ממדי, שני סקריפטים בפייתון שמגדירים את מצב ההתחלה ומצב היעד, תיאור טקסטואלי של המשימה ושני רינדורים בגודל 512 על 512 פיקסלים שממחישים את השינוי הנדרש. הנתונים מאורגנים כולם תחת חלוקה אחת, וניתן לטעון מראש רמות קושי ספציפיות.

מתאים ל

• בנצ'מרק לסוכני קוד

  בדיקת יכולת של מודלי שפה לייצר סקריפטים בפייתון שמשנים סצנות תלת ממד לפי תמונה.

• הערכת מודלים מולטימודליים

  מדידת הדיוק של מערכות ראייה בהבנת פערים ויזואליים בין שני רינדורים נתונים.

• ניסויי עריכה מונחית טקסט

  בחינת ממשקים שמקבלים פקודה טקסטואלית ומתרגמים אותה לפעולות ישירות בתוך בלנדר.

איפה זה נופל

זה לא מאגר לאימון מודלים מאפס וגם לא לפיין טיונינג סטנדרטי. עם 27 דוגמאות בסך הכל, מדובר במבחן ביצועים נטו. כל ההוראות והקוד הם באנגלית בלבד, ואין שום תמיכה בעברית. בנוסף, המשימות מוגבלות לאופי הנכסים של בלנדר סטודיו, כך שהן לא מכסות את כל סוגי העריכה האפשריים בתלת ממד. אם המודל שלכם לא יודע להתממשק עם ה־API של בלנדר, המאגר הזה פשוט לא יעזור.

איך טוענים

טוענים את הנתונים ישירות דרך הספרייה הרגילה של האגינג פייס, ללא צורך בהרשאה מוקדמת או בהמתנה לאישור גישה. אפשר למשוך את הכל יחד או לבחור קונפיגורציה של רמה מסוימת. שדות המפתח כוללים את תיאור המשימה, התמונות המרונדרות והקוד. כדי להריץ את הקוד שנוצר ולבדוק תוצאות בפועל, חובה להתקין את בלנדר במערכת המקומית.

from datasets import load_dataset

ds = load_dataset("DietCoke4671/BlenderBench")

הרישיון

הרישיון הוא CC-BY-4.0, מה שאומר שמותר להשתמש בו לצרכים מסחריים ומחקריים, לערוך ולשנות. החובה היחידה היא לתת קרדיט נאות ליוצרים המקוריים. מודל שאומן או נבדק על המאגר לא מחויב להיפתח ברישיון פתוח או להפיץ את המשקולות שלו.

• שימוש מסחרי
• שינוי הקוד
• חובת ייחוס

הרישיון המלא ב־Hugging Face ↗