חדש Key אחד לכל המודלים, עם הערכת מחיר לפני כל קריאה. יוצרים Key

GPT
P

PsyQA

קוד פתוח

lsy641mit2022-12-15

מאגר שאלות ותשובות לתמיכה נפשית וייעוץ, שמבוסס במקור על טקסטים ארוכים בסינית. מי שבונה מודלים לתמיכה רגשית ומחפש מבנה מוגדר של פניות ומענים ימצא כאן נקודת פתיחה מסודרת.

  • 337הורדות בחודש
  • 23לייקים

מה זה

המאגר מבוסס על המחקר של סאן ושותפיו מ־2021, ועבר עיבוד נוסף על ידי ליו ושותפיו ב־2023 כדי להתאים אותו ישירות לעבודה עם הכלים של האגינג פייס. הנתונים מתמקדים במענה פסיכולוגי מורכב, כזה שדורש טקסטים ארוכים ולא סתם תשובות קצרות של משפט בודד.

בפנים יש חלוקה מובנית לקובצי אימון, בדיקה ואימות, לצד גרסאות מלאות של המידע. המאגר כולל קבצים כמו PsyQA_full.json, קובץ נטול אסטרטגיות תגובה, וקובץ בדיקה מתורגם, כך שאפשר לבחון איך המודל מתמודד עם ניסוחים שונים או לתרגם את שיטות המענה לשפות נוספות.

מתאים ל

  • אימון מודלים לייעוץ

    לימוד מודל שפה איך לנסח תשובות ארוכות ומובנות לפניות מצוקה, תוך שמירה על טון תומך ומקצועי.

  • מחקר טוקניזציה רגשית

    בדיקת שיטות פירוק טקסט ייעודיות לטקסטים ארוכים בתחום בריאות הנפש, בהתאם למחקר שפורסם עם המאגר.

  • הערכת תרגום מונחי טיפול

    שימוש בקובץ הבדיקה המתורגם כדי לבדוק איך מושגים פסיכולוגיים עוברים בין שפות שונות.

איפה זה נופל

המקור של כל הדאטה הזה הוא בסינית, וזה המכשול המרכזי למפתח ישראלי. אין פה מילה אחת בעברית, וגם אם יש קובץ בדיקה מתורגם, תרגום מכונה של מונחים מעולם בריאות הנפש יכול להיות מסוכן ומטעה. בנוסף, מדובר בנתונים שנאספו במקור סביב 2021, כך שהם לא משקפים שינויים עדכניים, ובניית כלי שמייצר טקסט טיפולי דורשת פיקוח אנושי הדוק ששום דאטהסט גולמי לא פותר.

שאלות
נפוצות

האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?

כן, הרישיון המדווח בעמוד המאגר הוא MIT. הרישיון הזה מקנה חופש מלא לשימוש מסחרי, כולל שילוב במוצרים סגורים. התנאי היחיד הוא שמירה על הצהרת זכויות היוצרים והרישיון המקורי בקבצים שלכם.

האם המאגר כולל תוכן בעברית?

לא, אין במאגר טקסטים בעברית. הנתונים המקוריים נאספו בסינית כחלק ממחקר על תמיכה נפשית בשפה הזו. המאגר כולל אמנם קובץ בדיקה מתורגם, אך שפת המקור והמיקוד נותרו רחוקים מעברית לחלוטין.

מאיפה הנתונים הגיעו ואיך הם עובדו?

הבסיס נאסף במקור על ידי סאן ושותפיו בשנת 2021 עבור מחקר על ייעוץ נפשי בטקסט ארוך. בשנת 2023 ליו וצוותו עיבדו את החומרים מחדש, הוסיפו חלוקה מובנית לחלקי אימון ובדיקה, והעלו אותו לתשתית של האגינג פייס כדי להקל על הטעינה.

כמה קבצים יש במאגר ואיך ניגשים אליהם?

המאגר כולל 12 קבצים שונים בפורמט JSON לצד סקריפטים בפייתון. הגישה אליהם פתוחה לחלוטין ואין צורך לבקש אישור מיוחד מהיוצרים. אפשר להוריד את הקבצים ידנית או להשתמש בסקריפט הטעינה הייעודי שנמצא בפנים.

איך טוענים

טוענים את הנתונים ישירות דרך הספרייה של האגינג פייס עם מזהה המאגר lsy641/PsyQA, או מורידים את קובצי ה־JSON ישירות מהמאגר. אין פה תהליך אישור גישה מיוחד או שער שדורש הרשמה. המאגר כולל 12 קבצים, ביניהם סקריפט טעינה מוכן וקובצי פיצול, כשהמיקוד הוא בטקסט השאלה ובתוכן המענה הטיפולי שנמצא ברשומות.

from datasets import load_dataset

ds = load_dataset("lsy641/PsyQA")

הרישיון

המאגר מפורסם תחת רישיון MIT. הרישיון הזה מתיר שימוש מסחרי, שינוי של הקוד והנתונים, והפצה חופשית, כל עוד שומרים על הודעת זכויות היוצרים המקורית. מודל שתאמנו על הבסיס הזה פטור מדרישות שיתוף באותו רישיון, אבל המפרסמים מבקשים לצטט את המאמרים האקדמיים שליוו את יצירת המאגר והעיבוד שלו.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗