SongEval
קוד פתוחASLP-labcc-by-nc-sa-4.02025-05-16
מאגר הערכה אסתטית של שירים שלמים שמכיל כ־140 שעות שמע עם ציוני מומחים אנושיים. המטרה כאן היא לאמן מודלים לניבוי איכות מוזיקלית או להשוות בין מודלי יצירה שונים.
- 2,789הורדות בחודש
- 24לייקים
מה זה
המאגר כולל 2,399 שירים מלאים, עם שירה וליווי מוזיקלי, בהיקף של כ־140 שעות שמע. השירים מייצגים תשעה ז'אנרים מרכזיים ומגיעים משני מקורות: פלטים של חמישה מודלים שונים ליצירת מוזיקה, לצד תת-קבוצה של שירים אמיתיים ומקרי קצה לא מוצלחים שנועדו לבחון את גבולות השיפוט.
התוכן עצמו מורכב משירים בשפות אנגלית וסינית בלבד. כל שיר נבדק ודורג על ידי 16 מעריכים בעלי הכשרה מוזיקלית, בהנחיית מומחים מהקונסרבטוריון למוזיקה של שנגחאי ובסיוע ארגון התיוג של AISHELL.
מערך הנתונים מחזיק עבור כל רשומה קובץ שמע, סיווג מגדר של קול השירה וציונים על פני חמישה ממדים אסתטיים שנמדדו בסולם ליקרט בין 1 ל־5: קוהרנטיות כללית, זכירות, טבעיות הנשימה והניסוח הקולי, בהירות המבנה המוזיקלי ומוזיקליות כללית.
מתאים ל
- אימון מודל חיזוי איכות
לימוד רגרסיה מבוססת שמע לניבוי ציוני קוהרנטיות ומוזיקליות של שירים שנוצרו על ידי מחשב.
- השוואת מודלי יצירת מוזיקה
בנצ'מרק השוואתי בין מערכות יצירת שירים מול ציוני מומחים אנושיים בחמישה ממדים שונים.
- כיול מדדים אוטומטיים
בדיקת מתאם בין מטריקות איכות אקוסטיות לבין שיפוט אנושי של טבעיות וזכירות מוזיקלית.
איפה זה נופל
הנתונים מכסים רק שתי שפות, אנגלית וסינית, כך שאינם מייצגים מוזיקה בשפות אחרות או תבניות מקומיות כמו מוזיקה בעברית. רוב החומר מופק מחמישה מודלי יצירה, מה שיוצר הטיה מובנית לארטיפקטים ולסגנונות של אותם מודלים ספציפיים. בנוסף, חמשת ממדי ההערכה נקבעו לפי תפיסה מוזיקלית מסוימת של 16 מעריכים מוסמכים, כך שאין כאן מדד אובייקטיבי אלא שיפוט סובייקטיבי מקצועי. המאגר פורסם במאי 2025, והוא משקף את יכולות היצירה וההערכה של אותה תקופה בלבד, ללא התאמה אוטומטית למוצרי זמן אמת.
שאלות
נפוצות
האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?
לא, הרישיון הוא cc-by-nc-sa-4.0 שאינו מתיר שימוש מסחרי מכל סוג. כל שימוש מוגבל למחקר ולמטרות שאינן למטרות רווח. בנוסף, כל פיתוח נגזר חייב להיות משותף באותו רישיון מגביל.
האם יש במאגר שירים בעברית?
לא, המאגר כולל אך ורק שירים באנגלית ובסינית. אין בו ייצוג לשפות שמיות או למוזיקה בעברית. מי שמחפש הערכה לשירה מקומית יצטרך לבצע תיוג עצמאי.
איך נאספו ונוקדו השירים במאגר?
השירים מבוססים על פלטים של חמישה מודלי יצירת שירים לצד מקרי קצה ושירים אמיתיים. הם דורגו על ידי 16 מומחים מוזיקליים בהנחיית הקונסרבטוריון למוזיקה של שנגחאי. הדירוג נעשה בחמישה ממדים שונים בסולם ליקרט של 1 עד 5.
כמה מקום צריך בשביל להוריד את המאגר?
המאגר כולל 2,399 שירים מלאים באורך כולל של כ־140 שעות שמע באיכות גבוהה. יש בו מעל 2,400 קבצים, כולל קבצי שמע ומטא-דאטה, כך שנדרש נפח דיסק פנוי משמעותי לקבצי הקול. מומלץ להכין עשרות גיגה-בייט לפני שמתחילים בהורדה.
איך טוענים
טעינת המאגר מתבצעת ישירות דרך ספריית הנתונים של Hugging Face בפקודה load_dataset ללא צורך בהרשאת גישה מיוחדת, שכן המאגר פתוח להורדה. במאגר קיימים 2,407 קבצים, הכוללים קובץ מטא-דאטה בתצורת jsonl, תיקיית שמע עם קבצי mp3 ודוגמאות שמע שמיוצגות כ־wav ברשומות הטעינה.
לפני הטעינה כדאי לקחת בחשבון שמדובר בכ־140 שעות שמע מלאות, מה שדורש נפח אחסון משמעותי וזמן הורדה ממושך. השדות החשובים לכל רשומה הם קובץ השמע המלא, שדה המגדר, ומילון הציונים האסתטיים שכולל את חמשת המדדים של המעריכים האנושיים.
from datasets import load_dataset
ds = load_dataset("ASLP-lab/SongEval")הרישיון
המאגר מופץ תחת רישיון cc-by-nc-sa-4.0. המשמעות היא איסור מוחלט על שימוש מסחרי, חובת מתן קרדיט מלא למחקר המקורי, ודרישה לשתף כל נגזרת תחת אותו הרישיון בדיוק. מודל שתאמנו על הנתונים הללו יהיה מוגבל למחקר בלבד ולא יוכל לשמש מוצר מסחרי.
- שינוי הקוד
- חובת ייחוס
- שימוש מסחרי: לא