Multi-Turn-Insurance-Underwriting

מה זה

המאגר מציג אינטראקציות בין חתם ביטוח מסחרי לבין עוזר בינה מלאכותית, שנבנו בעזרת סוכני ReAct ופרוטוקול MCP. כל רשומה כוללת שאלה התחלתית סביב בקשת ביטוח של עסק קטן, שרשרת שיחה של עשרה עד עשרים תורות, שלבי הסקה, קריאות לכלי מידע דוגמת שאילתות SQL ובדיקת מדיניות, ותשובה סופית עם הסבר.

התוכן נבנה בצורה סינתטית סביב נתוני חברות ציבוריים ומידע ביטוחי, ונבדק ואושר על ידי מומחה מוסמך לחיתום ביטוח אלמנטרי. התיוג כולל תשובת ייחוס והערכת נכונות שבוצעה על ידי מודל שופט. המאגר מציג דגימה מתוך מאגר רחב יותר ומחולק לשישה סוגי משימות: בדיקת התאמה למדיניות החיתום עם 92 מקרים, המלצות על מוצרים עם 89 מקרים, גבולות אחריות עם 84 מקרים, בדיקת זכאות לעסקים קטנים עם 71 מקרים, השתתפות עצמית עם 34 מקרים, וסיווג עסקי לפי קוד עם 10 מקרים בלבד.

הרשומות מייצגות ריצות של מודלים שונים, בהם סדרות מודלים כמו Claude 4, Gemini 2.5 Pro וגרסאות o3 ו־o4-mini. לצד השיחה עצמה, כל שורה כוללת מזהה ייחודי להשוואה, תיאור העסק, הכנסות, מספר עובדים, כלי רכב, מבנה פיזי, מדינה בארצות הברית וענף הביטוח הרלוונטי.

מתאים ל

• בדיקת סוכנים מרובי שלבים

  הערכת ביצועי מודלים בשימוש בכלים חיצוניים והסקת מסקנות לאורך שיחה מורכבת.

• בנצ'מרק לחיתום ביטוחי

  מדידת הדיוק של מערכות אוטומטיות בבדיקת התאמת פוליסות לפי כללים מוגדרים.

• בחינת יכולות קריאת כלים

  ניתוח האופן שבו סוכנים מפעילים שאילתות מסד נתונים ופרוטוקול MCP בפועל.

איפה זה נופל

ההטיה המרכזית היא שהנתונים סינתטיים לחלוטין. למרות שמומחה חיתום עבר על המקרים, חסרים בהם הבלבול, הטעויות האנושיות וחוסר הבהירות שמאפיינים שיחות אמיתיות בין חתמים ללקוחות. בנוסף, המדגם קטן מדי לאימון מודל ומספיק בעיקר להערכה נקודתית.

הדאטהסט מוגבל לארצות הברית בלבד, הן מבחינת השפה שהיא אנגלית והן ברגולציה ובסיווגי החברות. הוא לא רלוונטי לחיתום מקומי בישראל ללא התאמה יסודית לחוקים ולמונחים המקומיים. נוסף על כך, כללי חיתום משתנים בתדירות גבוהה, ואינם מביאים בחשבון עדכוני מדיניות חדשים.

איך טוענים

טוענים את הנתונים ישירות דרך פייתון באמצעות הפקודה load_dataset עם המזהה snorkelai/Multi-Turn-Insurance-Underwriting. אין צורך בבקשת גישה מיוחדת, והקבצים זמינים להורדה חופשית בפורמט Parquet.

המאגר קטן מאוד ומכיל פחות מאלף רשומות, כך שהוא נטען תוך שניות בודדות. השדות המרכזיים שצריך לעבד הם trace, שמכיל רשימת מילונים עם כל שלבי ההסקה, קריאות הכלים וסוגי התפקידים של העוזר, לצד השדות reference_answer ו־correct שמשמשים לבדיקת דיוק.

from datasets import load_dataset

ds = load_dataset("snorkelai/Multi-Turn-Insurance-Underwriting")

הרישיון

המאגר מופץ תחת רישיון apache-2.0. הרישיון מתיר שימוש מסחרי, שינוי והפצה, ללא דרישה לשתף את הקוד או את המודלים שתאמנו תחת אותו הרישיון. התנאי העיקרי הוא מתן ייחוס למחברים המקוריים ושמירה על הודעות זכויות היוצרים. מבחינת מודל שיאומן או ייבדק על הנתונים, הרישיון אינו מגביל את הבעלות על המשקולות או על תוצרי הריצה.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗