GemmaX2-28-9B-v0.1

מה זה

שיאומי לקחו את הבסיס של גוגל והעבירו אותו אימון המשך על חמישים ושישה מיליארד טוקנים של מידע מקבילי וחד לשוני. המטרה כאן ממוקדת לגמרי, הם לא בנו מודל שיחה כללי אלא כלי שנועד לבצע תרגום ישיר בין עשרים ושמונה שפות נתמכות, כולל עברית, ערבית, רוסית ואנגלית, באמצעות כוונון עדין על הוראות תרגום.

בניגוד למודלי תשעה מיליארד פרמטרים רגילים שמתפזרים על כתיבת קוד או פתרון חידות, כאן כל המשקולות כוונו למבנה משפטים ותרגום שומר הקשר. כרטיס המודל כולל הפניה למאמר אקדמי של החוקרים עם תוצאות השוואתיות, וספציפית מציין שיצא כבר דגם המשך רחב יותר בשם מילמט ארבעים ושש שתומך במספר שפות גדול יותר.

מתאים ל

• תרגום מסמכים טכניים

  מתאים לתרגום פנימי של מדריכים ומסמכים בין עברית, אנגלית ורוסית בלי להוציא מידע מחוץ לרשת הארגונית.

• לוקליזציה לאתרים ואפליקציות

  עובד טוב על המרת מחרוזות ממשק בין עשרים ושמונה השפות הנתמכות לפי תבנית קבועה מראש.

• צינורות עיבוד מידע רב לשוני

  יעיל כשלב מקדים שמנרמל טקסטים בשפות שונות לאנגלית לפני שמזינים אותם למערכות ניתוח אחרות.

איפה זה נופל

הוא מוגבל אך ורק לעשרים ושמונה השפות שהוגדרו מראש. המפתחים מבהירים במפורש שאין שום הבטחה לאיכות תרגום בכל שפה אחרת, כך שאם יש לכם טקסט מעורב עם שפות שאינן ברשימה, התוצאה תישבר. בנוסף, חלון ההקשר מוגבל לשמונת אלפים טוקנים, מה שלא מתאים לספרים שלמים בלי פירוק מוקדם לחלקים.

אותה משפחה

GemmaX2-28 יצא ב־2 גרסאות שיש להן עמוד כאן. אלה האחרות, לפי כמה מורידים אותן.

איך מריצים

כדי להריץ אותו צריך כרטיס מסך עם לפחות עשרים וארבעה גיגה זיכרון כדי לטעון את שמונה עשר הנקודה תשעה גיגה של הקבצים בדיוק המקורי. מי שמחזיק כרטיס צרכני קטן יותר יצטרך לבצע קוונטיזציה או לחכות לגרסאות מכווצות.

ההרצה נעשית ישירות מקוד פייתון רגיל עם ספריית טרנספורמרס. הטקסט נכנס כפרומפט פשוט שמגדיר שפת מקור ושפת יעד, ואם אתם מתכננים נפח תרגום קטן, כנראה שעדיף לקרוא לממשק חיצוני במקום להחזיק שרת ייעודי שפועל כל הזמן.

from transformers import pipeline

pipe = pipeline("translation", model="ModelSpace/GemmaX2-28-9B-v0.1")
print(pipe("שלום"))

הקבצים

17 קבצים במאגר, 18.9 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• model-00003-of-00005.safetensors5.0 GB
• model-00002-of-00005.safetensors4.9 GB
• model-00001-of-00005.safetensors4.9 GB
• model-00004-of-00005.safetensors3.7 GB
• model-00005-of-00005.safetensors1.8 GB
• tokenizer.json17.5 MB
• tokenizer.model4.2 MB
• main.png795.6 KB
• tokenizer_config.json40.5 KB
• model.safetensors.index.json39.1 KB
• README.md3.0 KB
• .gitattributes1.6 KB
• config.json962 B
• special_tokens_map.json636 B
• NOTICE247 B
• generation_config.json168 B
• LICENSE127 B

הרישיון

הוא מופץ תחת רישיון ג'מה של גוגל. הרישיון מאפשר שימוש מסחרי ומחקר, אבל מחייב עמידה בתנאי השימוש המקוריים של גוגל ומדיניות השימוש ההוגן שלהם, כולל הגבלות על שימושים אסורים מסוימים.

• שימוש מסחרי
• שינוי הקוד
• כפוף לתנאי השימוש של Google

הרישיון המלא בעמוד המודל ↗