reasoning-distill-opus-4-7-max-sft
קוד פתוחlordx64apache-2.02026-04-18
המאגר כולל עקבות חשיבה של קלוד אופוס 4.7 שמוכנים לאימון ישיר. מפתחים ירצו אותו כדי לזקק יכולות היסק למודלים פתוחים בלי לבזבז טוקנים על הפורמט.
- 207הורדות בחודש
- 38לייקים
מה זה
הנתונים כוללים 7,823 שיחות בנות תור יחיד, שנלקחו ממאגר גולמי קודם של אותו יוצר. הפרומפטים מוחזרו מאיסופים ישנים יותר, אך התשובות הופקו מחדש באמצעות קלוד אופוס 4.7 עם חשיבה מורחבת. כל רשומה נשמרת תחת עמודת טקסט יחידה במבנה תבנית שיחה של קוון, הכוללת את תגיות המערכת, המשתמש ובלוק חשיבה ייעודי של העוזר.
במהלך העיבוד סוננו שורות מהמאגר המקורי שהכיל 8,124 דוגמאות. הוסרו מקרים שבהם סיבת העצירה לא הגיעה לסיום טבעי, או שבלוק החשיבה והתשובה הסופית נותרו ריקים. אין כאן חלוקה מובנית לחלקי בדיקה או אימון, והקובץ מגיע כחטיבה אחת שמיועדת להזנה ישירה למאמן.
מתאים ל
- אימון מודלי היסק
הזנה ישירה של שיחות עם בלוקי חשיבה לתהליך כוונון עדין של מודלי קוון.
- זיקוק יכולות היסק
העברת דפוסי פתרון בעיות של מודל סגור וחזק למודל פתוח וקטן יותר.
- ניתוח שרשראות חשיבה
בדיקת מבנה שלבי החשיבה המורחבת של אופוס 4.7 על פני משימות שונות.
איפה זה נופל
הנתונים כולם באנגלית ואין כאן עברית כלל. מדובר באיסוף סינתטי לחלוטין מתור יחיד, כך שהוא לא יעזור למי שבונה שיחות מרובות שלבים או שירות לקוחות. מעבר לכך, התשובות נוצרו במלואן על ידי קלוד דרך ממשק הפיתוח, מה שמחייב לבדוק את מדיניות השימוש של אנתרופיק לפני שמפתחים או מפיצים מודל מתחרה. תלות מלאה בפלט של מודל יחיד גם מעתיקה את ההטיות וחוסר הדיוקים שלו.
שאלות
נפוצות
האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?
העטיפה ברישיון אפאצ'י 2.0, אך התוכן נוצר באמצעות אופוס 4.7 של אנתרופיק. צריך לוודא שתנאי השימוש ומדיניות החברה מתירים את השימוש המסחרי הספציפי שאתם מתכננים.
האם הדאטהסט כולל שאלות או תשובות בעברית?
לא. כל הנתונים במאגר נוצרו באנגלית בלבד, ואין בו תמיכה בשפות אחרות.
איך נאספו וסוננו הרשומות?
הפרומפטים נלקחו ממאגרים קודמים והורצו מחדש מול קלוד אופוס 4.7. מתוך 8,124 דוגמאות גולמיות הוסרו כ־300 רשומות שלא הסתיימו כראוי או שהכילו חשיבה ותשובה ריקות.
במה הוא שונה מגרסת המקור הגולמית?
הגרסה הגולמית מחזיקה עמודות נפרדות למודל, לחשיבה ולתשובה. הגרסה הזו ממירה את הכל למחרוזת אחת מוכנה בתבנית של קוון, כך שאפשר לאמן עליה מיד בלי עיבוד מקדים.
איך טוענים
טוענים את קובץ הפרקט היחיד דרך ספריית הדאטהסטים הרגילה, ללא צורך באישור גישה או מפתח מיוחד. כל שיחה כבר מעוצבת בעמודת טקסט בודדת, כך שמי שמאמן עם מאמן אס-אף-טי יכול להזין אותה ישירות. אורך ממוצע עומד על כארבעת אלפים טוקנים בטוקנייזר של קוון 3, אבל שרשראות החשיבה הארוכות מגיעות עד 32 אלף טוקנים, ולכן צריך לשים לב להגדרות החיתוך כדי לא לאבד זיכרון.
from datasets import load_dataset
ds = load_dataset("lordx64/reasoning-distill-opus-4-7-max-sft")הרישיון
האריזה והקוד של המאגר מופצים ברישיון אפאצ'י 2.0, שמתיר שימוש מסחרי ושינויים בתנאי מתן קרדיט. עם זאת, התוכן עצמו הופק ישירות מהממשק של אנתרופיק. המשמעות היא שכל אימון של מודל נשען על תנאי השימוש המסחריים שלהם, והרישיון הפתוח של הקובץ לא מבטל את ההגבלות האלה.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים