חדש Key אחד לכל המודלים, עם הערכת מחיר לפני כל קריאה. יוצרים Key

GPT
T

text-2-video-human-preferences

קוד פתוח

Rapidataapache-2.02024-12-20

  • human
  • preferences
  • coherence
  • plausibilty
  • style

השוואות ראש בראש בין סרטונים של מודלי וידאו מובילים עם ציוני שיפוט אנושי. בסיס טוב למי שמפתח מודל תגמול או בוחן עמידה בפיזיקה והוראות טקסט.

  • 1,554הורדות בחודש
  • 21לייקים

מה זה

המאגר מציג השוואות זוגיות בין סרטונים קצרים שנוצרו ממודלי וידאו שונים, בהם סורה, הוניואן, פיקה 2.0, ראנוויי אלפא ולומה ריי 2. כל רשומה כוללת קישורים לקובצי גיף קלים לתצוגה מקדימה, לצד מזהי קבצים שמפנים לווידאו המקורי ברזולוציה מלאה מתוך תיקיית הקבצים.

המשוב האנושי נאסף תוך כשתים עשרה שעות דרך ממשק ה־API של המפרסמת ונשען על שלושה ממדי בדיקה נפרדים: התאמה לטקסט המקורי, לכידות ויזואלית וחוקי פיזיקה ללא חשיפה לפרומפט, והעדפה אסתטית כללית. הציונים המעובדים נעים בין אפס לאחד, כשבנוסף נשמרות גם תשובות המדרגים הבודדים.

מתאים ל

  • אימון מודל תגמול לווידאו

    כיול מודל דירוג לפי ציוני לכידות והעדפה אנושית על בסיס השוואות זוגיות.

  • בנצ'מרק למודלי יצירה

    בדיקת איכות של מודל וידאו חדש מול תוצרי סורה והוניואן במבחן התאמה לפרומפט.

  • סינון עיוותים ובעיות פיזיקה

    שימוש בציוני הלכידות כדי ללמד מסווגים לזהות תנועות לא טבעיות בסרטוני בינה מלאכותית.

איפה זה נופל

ההיקף קטן יחסית ומכיל בין אלף לעשרת אלפים רשומות, מה שמגביל מאוד אימון של מודלים כבדים ומתאים בעיקר להערכה. כל הפרומפטים באנגלית בלבד, ואין ייצוג לשפות אחרות. מעבר לזה, הכרטיס מציין איסוף בזק של כשתים עשרה שעות בלי פירוט על רקע המדרגים, בדיקות בקרת איכות או אופן שקלול התוצאות.

שאלות
נפוצות

האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?

כן. המאגר מופץ תחת רישיון Apache 2.0 המאפשר שימוש מסחרי מלא, כולל אימון מודלים והטמעה באפליקציות. התנאי היחיד הוא שמירה על הצהרת הרישיון ומתן קרדיט ליוצרים.

האם יש בדאטהסט תמיכה בעברית?

לא. כל הפרומפטים וההנחיות שנבדקו מוגדרים באנגלית בלבד. אם המוצר שלכם מיועד להתמודד עם קלט בעברית, תצטרכו לתרגם את הטקסטים או לאסוף הערכות מקומיות.

איך נאספו הציונים ומי דירג את הסרטונים?

הנתונים נאספו תוך כשתים עשרה שעות באמצעות פלטפורמת Rapidata. המשתמשים התבקשו לבחור את הסרטון המוביל בכל סבב לפי שלוש שאלות מוגדרות מראש, אך הכרטיס אינו מפרט את הדמוגרפיה של הבודקים.

איפה נמצאים הסרטונים המלאים?

טבלת הנתונים הראשית כוללת קובצי גיף קטנים לתצוגה מהירה. קובצי הווידאו המלאים ברזולוציה גבוהה שמורים בפורמט MP4 בתוך תיקיית Videos, ומקושרים לרשומות באמצעות שמות הקבצים.

איך טוענים

טוענים את הנתונים דרך ספריית datasets הרגילה של Hugging Face ללא צורך באישור גישה. הדאטהסט כולל מעל אלף קבצים, רובם קובצי וידאו בפורמט MP4 שנמצאים תחת תיקיית Videos ודורשים נפח אחסון מקומי בהתאם. השדות המרכזיים לעבודה הם file_name1 ו־file_name2 שמצביעים לסרטונים המלאים, weighted_results שמכיל את הציון המשוקלל, ו־detailedResults שמרכז את הפירוט של כל בודק אנושי.

from datasets import load_dataset

ds = load_dataset("Rapidata/text-2-video-human-preferences")

הרישיון

הרישיון הוא Apache 2.0. מותר להשתמש במידע למטרות מסחריות, לשנות אותו ולשלב אותו במודלים ובמערכות סגורות, כל עוד שומרים על הודעת זכויות היוצרים והרישיון המקורי. אין חובה לפתוח קוד או משקולות שפותחו בעזרתו.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗