the_pile_deduplicated

the_pile_deduplicated הוא דאטהסט בקוד פתוח מאת EleutherAI. הוא פורסם ב־Hugging Face ב־2022-12-02.

לא דווח רישיון בכרטיס של the_pile_deduplicated. בהיעדר רישיון מפורש אין להניח שימוש מסחרי מותר.

13,292 הורדות ו־117 לייקים לפי Hugging Face. מספרי הורדה מודדים שימוש אוטומטי לא פחות מאשר אנושי, אז הם סימן לפופולריות ולא מדד איכות.