GPT
N

Nemotron-Research-Reasoning-Qwen-1.5B

קוד פתוח

nvidiacc-by-nc-4.02025-05-28

  • transformers
  • safetensors
  • qwen2
  • text-generation
  • conversational

nvidia עומדים גם מאחורי NVIDIA AI, ויש עליו סקירה כאן.

גרסה מכווננת של קוואן שמביאה יכולות פתרון בעיות ומתמטיקה של מודלים כבדים בהרבה לתוך משקל נוצה. אם אתם צריכים חשיבה לוגית מקומית על חומרה צנועה, לכאן כדאי להסתכל.

  • 1.8Bפרמטרים
  • 131,072טוקנים בהקשר
  • 6.6 GBמשקל הקבצים
  • 1,183הורדות בחודש

מה זה

מדובר במודל של 1.8 מיליארד פרמטרים שמבוסס על ארכיטקטורת Qwen2 ועבר אימון חיזוקים ממושך בשיטה שאנבידיה מכנה ProRL. המטרה כאן ממוקדת מאוד: הסקת מסקנות, קוד, מתמטיקה וחידות לוגיות, בלי לגרור משקל עודף של מודל ענק.

במבחנים של אנבידיה המודל הזה עוקף משמעותית את המקור שלו, DeepSeek-R1-1.5B, ובכמה מדדים כמו מבחן המדע GPQA או חידות לוגיות הוא אפילו משאיר אבק לגרסת ה־7B של דיפסיק. בפועל זה אומר שפתרון משוואות ומעקב אחרי שלבים לוגיים מתבצעים פה ברמה גבוהה בהרבה ממה שהורגלנו לראות בקטגוריית המשקל הזו.

המאגר כולל גם עדכונים כמו v2 וגרסת BroRL שהרחיבו את צעדי האימון ושיפרו עוד יותר את הדיוק בקוד ובמתמטיקה. מי שמחפש מנוע היגיון קטן שיכול לרוץ כמעט על כל דבר ימצא פה ביצועים חריגים יחסית לגודל.

מתאים ל

  • פתרון בעיות מתמטיקה מקומי

    עוקף את רוב המודלים בגודל שלו במבחני AIME ומתאים למכונות נטולות כרטיס מסך ייעודי.

  • פיצוח אתגרי קוד קלים

    מציג ציונים גבוהים מול מתחרים בקטגוריה במבחני HumanEval ומסייע בלוגיקה תכנותית.

  • מעבד לוגי במכשיר קצה

    בזכות משקל קבצים של 6.6 גיגה הוא יכול לרוץ על חומרה מקומית לפתרון חידות והסקת מסקנות.

איפה זה נופל

המודל הוגדר ונבדק באנגלית בלבד, כך שאין כאן שום הבטחה או בדיקה לגבי עבודה בעברית. בנוסף, חלון ההקשר אמנם מוגדר טכנית ל־131,072 טוקנים, אבל במודלים זעירים כאלה דחיסה של טקסטים ארוכים במיוחד עלולה לפגוע בדיוק ובאיכות הפלט.

מעבר לזה, המודל אומן ספציפית על מתמטיקה, קוד וחידות. לא הייתי משתמש בו למשימות יצירתיות, שיחה כללית פתוחה או ניתוח טקסט ספרותי, כי האימון הממוקד על חשיבה לוגית נוטה לשחוק יכולות שיחה גמישות.

שאלות
נפוצות

האם המודל מתאים ליישום מסחרי בעסק שלי?

לא. הרישיון הוא cc-by-nc-4.0 שמונע במפורש כל שימוש מסחרי, וכרטיס המודל מדגיש שהוא מיועד לצורכי מחקר ופיתוח בלבד.

האם גרסת ברירת המחדל היא הטובה ביותר?

גרסת ברירת המחדל בטעינה רגילה היא v2, שמציגה תוצאות עדיפות על פני הגרסה הראשונה ברוב מבחני הקוד וההוראות. קיים גם ענף בשם BroRL שמשפר עוד יותר את הביצועים באתגרי תכנות מסוימים, אך הוא דורש משיכה של הצ'קפוינט הספציפי.

איך המודל מתמודד עם טקסט בעברית?

השפה המוגדרת בכרטיס המודל היא אנגלית בלבד, וכל האימון סבב סביב מאגרי חשיבה וקוד באנגלית. סביר להניח שביצועיו בעברית יהיו נמוכים או לא יציבים, כך שמומלץ לעבוד איתו באנגלית בלבד.

איך מריצים

בגודל של 6.6 גיגה־בייט בדיוק bfloat16, המודל הזה יושב בנוחות על כל כרטיס מסך ביתי עם 8 עד 12 גיגה זיכרון, ואפילו על מעבד רגיל ומחשבים ניידים עם מספיק זיכרון מערכת. הטעינה נעשית דרך ספריית transformers הרגילה של פייתון, כאשר קריאה פשוטה טוענת את גרסת v2, ואפשר לגשת לגרסה המקורית דרך ענף v1 או ל־BroRL דרך הענף הייעודי שלה.

בגלל שהוא כל כך קל וזול להרצה עצמית, כמעט ואין סיבה לשלם לספק ענן על שירות מנוהל או API חיצוני. התועלת העיקרית מגיעה דווקא מהיכולת להריץ אותו ישירות על המכונה שלכם בלי תלות ברשת ובלי תשלום לפי טוקן.

from transformers import pipeline

pipe = pipeline("text-generation", model="nvidia/Nemotron-Research-Reasoning-Qwen-1.5B")
print(pipe("שלום"))

הרישיון

הרישיון הוא cc-by-nc-4.0, מה שאומר שהוא סגור למחקר ולשימוש אישי בלבד. אנבידיה מצהירה במפורש שהמודל מיועד למחקר ופיתוח. אסור לשלב אותו בשום מוצר מסחרי, אפליקציה בתשלום או שירות שמניב הכנסות, וצריך לתת קרדיט ליוצרים בכל פרסום מחקרי.

  • שינוי הקוד
  • חובת ייחוס
  • שימוש מסחרי: לא

הרישיון המלא בעמוד המודל ↗