arxiv-classification
קוד פתוחccdvרישיון לא דווח2022-03-02
מאגר מאמרים אקדמיים מלאים שמיועד לסיווג טקסטים ארוכים במיוחד של מעל 4,000 טוקנים. הוא מחלק עבודות מחקר מרובות עמודים ל־11 קטגוריות שונות.
- 1,354הורדות בחודש
- 27לייקים
מה זה
המאגר מבוסס על מחקר משנת 2019 בנושא סיווג מסמכים ארוכים באמצעות מנגנוני קשב, והועתק ישירות מהעבודה של החוקרים. הוא כולל 33 אלף מאמרים מאתר Arxiv, כשכולם מסמכים ארוכים שעוברים את רף 4,000 הטוקנים, ומחולקים ל־11 מחלקות עם חוסר איזון קל ביניהן.
הנתונים מחולקים מראש לשלושה חלקים ברורים: סט אימון שמכיל 28 אלף מאמרים, סט אימות עם 2,500 מאמרים, וסט מבחן של 2,500 מאמרים נוספים. המאגר מציע שתי תצורות שונות לעבודה, ברירת מחדל רגילה או גרסה ללא הפניות שמנקה מהטקסט תיוגים ישירים של הקטגוריות כדי למנוע זליגת מידע למודל בזמן הלמידה.
מתאים ל
- סיווג מסמכים ארוכים
אימון ובדיקה של מודלים להתמודדות עם טקסטים מדעיים באורך של אלפי מילים.
- בנצ'מרק למנגנוני קשב
הערכת היכולת של ארכיטקטורות שונות לזהות נושא מתוך הקשר רחב מאוד.
- מבחן עיוור לזליגת מידע
שימוש בתצורת no_ref כדי לבדוק סיווג ללא תגיות מזהות בטקסט עצמו.
איפה זה נופל
כל הטקסטים הם מאמרים אקדמיים באנגלית בלבד, כך שאין כאן שום ייצוג לעברית או לטקסטים יומיומיים. הנתונים נאספו ממאמרים שפורסמו עד 2019, מה שאומר שהתחומים והמינוחים משקפים את המצב המדעי של אותה תקופה. מעבר לזה, חוסר האיזון הקל בין 11 המחלקות דורש בדיקה של התפלגות התוצאות, והאורך החריג של המסמכים דורש התמודדות עם חלונות הקשר גדולים או קיצוץ טקסט.
שאלות
נפוצות
האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?
היוצר לא הגדיר רישיון בעמוד המאגר, ולכן אין אישור מפורש לשימוש כזה. שימוש מסחרי במצב כזה הוא סיכון משפטי שכדאי להימנע ממנו. מומלץ להגביל את השימוש בו למחקר, ניסויים פנימיים והערכת ביצועים.
האם יש במאגר טקסטים בעברית?
לא, כל המסמכים הם מאמרי מחקר שנכתבו בשפה האנגלית בלבד. המאגר נאסף כולו מתוך אתר Arxiv ומכיל טרמינולוגיה מדעית באנגלית. אם אתם מחפשים לאמן מודל לסיווג עברית, המאגר הזה לא יתאים למשימה.
מה ההבדל בין התצורה הרגילה לתצורת no_ref?
בגרסה הרגילה הטקסט כולל את כל הסימונים המקוריים של המאמר, כולל תיוגים של תחומי המחקר בסוגריים. גרסת no_ref מנקה את ההפניות האלה כדי שהמודל לא ילמד לזהות את הקטגוריה לפי רמזים טכניים שטחיים. מומלץ להשתמש בה כדי לקבל הערכה אמינה יותר של יכולת הסיווג.
איך המאגר הזה נאסף במקור?
הוא נלקח מתוך מחקר אקדמי משנת 2019 שעסק בסיווג מסמכים ארוכים באמצעות למידת קשב. החוקרים ליקטו 33 אלף מאמרים מ־Arxiv וחילקו אותם ל־11 קטגוריות תוך שמירה על מסמכים באורך של מעל 4,000 טוקנים. הנתונים הועלו מחדש לפורמט Parquet כדי לאפשר טעינה מהירה בכלי למידה עמוקה.
איך טוענים
טוענים אותו ישירות דרך ספריית datasets בפורמט Parquet, ללא צורך בהרשאה מיוחדת או בבקשת גישה מהיוצרים. הקבצים מחולקים לארבעה חלקי אימון וקבצי בדיקה נפרדים, והם תואמים ישירות לסקריפטים סטנדרטיים של סיווג טקסט כמו run_glue. יש לבחור מראש בין התצורה הרגילה לתצורת no_ref שמסירה רמזים מקדימים בגוף המסמך.
from datasets import load_dataset
ds = load_dataset("ccdv/arxiv-classification")הרישיון
היוצרים לא דיווחו על רישיון שימוש בעמוד המאגר. מבחינה מעשית זה אומר שאין היתר ברור לשימוש מסחרי, ואי אפשר לדעת בוודאות מה המגבלות על מודל שתאמנו עליו. מי שמתכנן להשתמש בזה למוצר מסחרי לוקח סיכון משפטי, ועדיף להתייחס אליו כרגע כחומר למחקר ולהערכה בלבד.