חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
I

internlm2-math-7b

רץ בדפדפן

internlmרישיון לא דווח2024-01-24

  • gradio

פתרון בעיות מתמטיות בממשק שיחה פשוט. מתאים למי שמחפש לבדוק חישובים והוכחות בלי להגדיר סביבת עבודה מקומית.

  • —הורדות בחודש
  • 75לייקים

מה זה

כותבים שאלה או תרגיל מתמטי בתיבת הטקסט ומקבלים תשובה מפורטת בחלון הצ'אט. הממשק כולל אפשרות לכוונן את אורך הפלט המבוקש, לצד שליטה בפרמטרים כמו טמפרטורה וערך top_p שמשפיעים על רמת היצירתיות או הדיוק של התוצאה. ישנם כפתורים מובנים לביטול הפעולה בזמן אמת או לאיפוס השיחה מחדש.

למרות שם הדף, הקוד בפועל טוען את המודל המשודרג internlm2-math-plus-7b. ההרצה עצמה נשענת על מנוע turbomind מתוך ספריית lmdeploy, שנועד לייעל את מהירות התגובה וההסקה של מודלי שפה גדולים. דוגמאות מובנות מראש לא מופיעות בממשק, כך שצריך להזין שאלות לבד ישירות לתיבת הטקסט.

מתאים ל

  • פתרון תרגילי מתמטיקה

    מזינים משוואה או בעיה מילולית ומקבלים שלבי פתרון מפורטים.

  • בדיקת חישובים

    השוואת תוצאות שקיבלתם בעצמכם מול החישוב שהמודל מציג.

  • בדיקת מנוע turbomind

    התרשמות מצורת החיבור של מנוע ההסקה לממשק גרדיו בקוד.

איפה זה נופל

הבעיה המיידית היא שהדמו בכלל לא עובד כרגע ונתקע בשגיאה. מעבר לזה, שם המרחב מדבר על גרסת הבסיס אבל הקוד טוען גרסת פלוס, מה שמבלבל אם מחפשים לבדוק התנהגות ספציפית. מודל של שבעה מיליארד פרמטרים נוטה לפספס בהוכחות מורכבות או חישובים ארוכים, ואי אפשר להסתמך עליו בעיניים עצומות.

שאלות
נפוצות

האם השימוש בדף הזה עולה כסף?

הגישה לממשק באתר חופשית לחלוטין ואינה דורשת תשלום. עם זאת, נכון לעכשיו הוא במצב תקול ולא מגיב. אם יחזור לעבוד, אפשר להתנסות בו ישירות מהדפדפן.

כמה זמן לוקח לקבל תשובה?

השרת מוגדר על מאיץ a10g-small יחד עם מנוע turbomind שאמור לספק תשובות תוך שניות ספורות. בפועל זה לא משנה כרגע, כי הדף נמצא בשגיאת ריצה מתמשכת. שום שאילתה לא תעבור עד שהמפתח יעדכן את הקוד.

אפשר להריץ את המערכת הזו על המחשב האישי?

כן, הקוד הציבורי מפנה לדף הגיטהאב של הפרויקט שבו מוסבר איך להוריד את המשקלים. תצטרכו מחשב עם מעבד גרפי מתאים כדי להפעיל את מודל 7B בעזרת ספריית lmdeploy. ההרצה המקומית עוקפת את התקלות שיש בדף הזה.

האם זה אותו הדבר כמו המודל המקורי internlm2-math-7b?

לא בדיוק, כי בקוד של הממשק נטען דווקא המודל internlm2-math-plus-7b. זו גרסה מעודכנת יותר של אותו מודל מתמטי. מי שרוצה לבחון דווקא את גרסת הבסיס הרגילה יקבל פה תוצאות של גרסת הפלוס.

איך משתמשים

כרגע אי אפשר להריץ את הדמו כי הוא נמצא במצב שגיאת ריצה. באופן עקרוני מזינים שאלה, משנים פרמטרים בסליידרים אם רוצים, ושולחים. השרת מוגדר על חומרת a10g-small שהייתה אמורה לתת מענה סביר של שניות בודדות לחישוב, אבל עד שמישהו יתקן את הקוד שם, הדף לא מגיב.

הרישיון

הרישיון של המרחב לא דווח בדף. במצב כזה אין אישור מפורש לשימוש מסחרי, וקשה לדעת מה המגבלות על הקלט שמזינים או על הפלט שמתקבל.

הרישיון המלא ב־Hugging Face ↗