GPT
O

Osmosis-Structure-0.6B

קוד פתוח

osmosis-aiapache-2.02025-05-28

  • transformers
  • safetensors
  • gguf
  • endpoints_compatible

מודל קומפקטי שמיועד לחלץ ולייצר פלט מובנה לפי סכמה, במקום שתשרפו טוקנים יקרים על מודלי ענק. הוא מאומן למלא ערכים בלבד בתוך מנועי הסקה תואמים.

  • 596Mפרמטרים
  • 5.1 GBמשקל הקבצים
  • 1,406הורדות בחודש
  • 416לייקים

מה זה

במקום לתת למודל שפה ענק לכתוב JSON שלם ולהסתכן בהזיות תחביר, הרעיון כאן הוא לקחת טקסט חופשי או שלבי חשיבה, ולהשתמש במודל של 596 מיליון פרמטרים שמתמקד אך ורק בחילוץ הערכים לשדות הנדרשים.

הוא נבנה על בסיס Qwen3-0.6B ועבר למידת חיזוק מול כחצי מיליון דוגמאות של מיפוי בין שפה טבעית ל־JSON. המפתחים מציגים קפיצות דיוק מרשימות במבחני מתמטיקה כמו DAPO 17K ו־AIME, אבל חשוב לשים לב שהטבלאות מציגות בעיקר איך הטכניקה הזו מקפיצה מודלים גדולים כמו Claude ו־GPT-4.1 כשמשלבים אותה בתהליך, ולא בהכרח את הציון העצמאי שלו לבד.

מתאים ל

  • חילוץ נתונים ל־JSON

    הפיכת טקסט חופשי או דוחות לפלט מובנה וקשיח לפי סכמה מוגדרת מראש.

  • עיבוד שלבי חשיבה

    קבלת פלט של מודל חשיבה אחר והמרת התוצאה הסופית לשדות מוגדרים.

  • הסקה מהירה במכשיר קצה

    הפעלת מנוע פלט מובנה על חומרה מקומית חלשה יחסית בלי תלות ברשת.

איפה זה נופל

המודל הזה לא נועד לנהל שיחה, לכתוב מאמרים או להבין הקשרים מורכבים בעצמו. הוא מתבסס לחלוטין על מנועי הסקה שמכתיבים לו את המבנה, וכרטיס המודל לא מציג שום מדד ביצועים של המודל הקטן בפני עצמו אלא רק את השיטה כולה על גבי מודלי ענק. לפני שמשלבים אותו במוצר, חובה לבדוק איך הוא מתמודד עם טקסטים בעברית, שכן אין שום מידע על אימון רב־לשוני בחומר.

שאלות
נפוצות

האם אפשר להשתמש בו ישירות כמו ב־ChatGPT?

לא. המודל אומן למטרה ממוקדת של הפקת פלט מובנה בעזרת מנועי הסקה שמגדירים מראש את המבנה והמפתחות, והוא לא מיועד לשיחה חופשית.

איך הכי מומלץ לחבר אותו לפרויקט?

היוצרים ממליצים להרים שרת באמצעות SGLang כדי לקבל ביצועים טובים ופלט מובנה מדויק, או להריץ אותו מקומית דרך Ollama.

איך מריצים

בגודל של קצת יותר מחצי מיליארד פרמטרים ומשקל קבצים של 5.1 גיגה בייט, אפשר להריץ אותו כמעט על כל כרטיס מסך בסיסי או מחשב מקומי בלי להזיע. המפתחים ממליצים להרים אותו ישירות מעל SGLang בפקודת שרת פשוטה, או לטעון אותו דרך Ollama.

אם אתם צריכים רק מדי פעם לחלץ שדות מטקסט, אין סיבה להחזיק תשתית דולקת ועדיף לשלוח קריאה ל־API חיצוני. היתרון בהרצה עצמית כזו מגיע כשמריצים עשרות אלפי בקשות במקביל ורוצים אפס עלויות ענן פר טוקן וזמני תגובה מיידיים.

ollama run hf.co/osmosis-ai/Osmosis-Structure-0.6B:Q4_K_M

איזו גרסה

אותו מודל בכמה רמות דחיסה. ככל שהמספר נמוך יותר הקובץ קטן יותר ורץ על פחות זיכרון, והתשובות נהיות פחות מדויקות. רוב האנשים רוצים את הגדולה ביותר שנכנסת להם בזיכרון.

הרישיון

הוא מופץ תחת רישיון apache-2.0. מותר להשתמש בו לצרכים מסחריים, לשנות אותו, להריץ אותו אצלכם בשרתים ולשלב אותו בקוד סגור, כל עוד שומרים על הודעת הרישיון וזכויות היוצרים המקוריות.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗