GPT
G

GLM-130B

רץ בדפדפן

zai-orgapache-2.02022-08-03

  • gradio

ממשק פשוט לבדיקת מודל שפה דו לשוני באנגלית וסינית. מתאים לחוקרים ומפתחים שרוצים לבחון השלמת טקסט ותרגום בלי להרים שרת עצמאי.

  • הורדות בחודש
  • 537לייקים

מה זה

מזינים טקסט באנגלית או בסינית לתוך תיבה של שבע שורות ומקבלים פלט טקסטואלי מקביל. הקוד מציג דוגמאות מובנות להשלמת משפטים, יצירת טקסט ותרגום הדדי בין שתי השפות בלבד. הממשק חושף שליטה בפרמטרים כמו אורך פלט שנע בין 32 ל 256, אורך מינימלי, וקביעת סיד קבוע לשחזור תוצאות.

מאחורי הקלעים הקוד מתחבר אל מודל GLM 130B. אפשר לבחור בין שתי אסטרטגיות דגימה שונות לגמרי: חיפוש אלומה עם הגדרות של מספר אלומות, עונש על אורך ומניעת חזרות, או אסטרטגיה בסיסית שמאפשרת לכוונן טמפרטורה, דגימת טופ קיי עד 40 וטופ פי.

מתאים ל

  • תרגום אנגלית וסינית

    תרגום ישיר של פסקאות קצרות בין שתי השפות לפי הדוגמאות שמובנות במערכת.

  • השלמת טקסט מונחית

    יצירת המשך לפסקה קיימת תוך שליטה באורך המינימלי ומניעת חזרות מילוליות.

  • ניסוי באסטרטגיות פענוח

    השוואה בין תוצאות של חיפוש אלומה לבין דגימת הסתברות עם טמפרטורה וטופ פי.

איפה זה נופל

הממשק מוגבל לפלט קצרצר של עד 256 יחידות טקסט בלבד, כך שלא תוכלו לייצר מאמרים ארוכים. תיבת הקלט מיועדת מפורשות לאנגלית או לסינית, ואין כאן תמיכה בעברית. היכולות נשענות על קריאות רשת חיצוניות מתוך שרת מעבד חלש, ולכן תקלות תקשורת או עומסים עלולים לעצור את המענה.

שאלות
נפוצות

האם השימוש בממשק עולה כסף?

לא, הגישה פתוחה בדפדפן ואין דרישה לתשלום או להזנת אמצעי חיוב. כל מה שצריך זה לפתוח את העמוד ולהתחיל להריץ טקסטים.

כמה זמן לוקח לקבל תשובה?

הקוד שולח בקשת רשת לשרת חיצוני שמחזיק את המודל הגדול. זמן ההמתנה תלוי בעומס על אותו שרת ובאורך הפלט שבחרתם בסליידר.

האם אפשר להריץ את המודל מקומית על המחשב?

הקוד של הממשק עצמו פשוט ונגיש, אבל המודל שמאחוריו כולל 130 מיליארד פרמטרים. להרצה מקומית מלאה שלו דרושה חומרת שרתים כבדה ולא מחשב רגיל.

במה הממשק שונה משימוש ישיר במודל?

הממשק נותן גישה גרפית מהירה דרך הדפדפן עם סליידרים מוכנים. הוא חוסך כתיבת קוד אבל מגביל את הפלט לאורך מרבי של 256 בלבד.

איך משתמשים

מקלידים את הטקסט או לוחצים על אחת מדוגמאות הממשק, ואז לוחצים על כפתור Generate. כפתור Clear מנקה מיד את שדה הקלט. החומרה שמריצה את הממשק היא מעבד בסיסי, והקוד שולח בקשות רשת החוצה דרך ספריית requests במקום להריץ 130 מיליארד פרמטרים על השרת המקומי.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי, שינוי והפצה כולל לצרכים מסחריים בכפוף לתנאי הרישיון. הטקסטים שאתם מזינים נשלחים בבקשת רשת דרך שרתי הממשק.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗