חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
C

CogView3-Plus-3B-Space

רץ בדפדפן

THUDM-HF-SPACEרישיון לא דווח2024-10-09

  • gradio

הממשק מייצר תמונות מטקסט ישירות בדפדפן ומיועד למי שרוצה לבדוק את יכולות המודל בלי להתקין סביבת פיתוח. מקלידים תיאור באנגלית ומקבלים קובץ תמונה.

  • —הורדות בחודש
  • 56לייקים

מה זה

מקלידים תיאור טקסטואלי של סצנה ומקבלים תמונה בודדת. הממשק כולל שדה טקסט פשוט, כפתור הרצה וכפתור מיוחד לשדרוג הפרומפט, לצד הגדרות מתקדמות שמאפשרות לקבוע רוחב, גובה, כמות צעדי יצירה, ערך סיד ומידת ההיצמדות להנחיה המקורית. המערכת כוללת גם רשימת דוגמאות מוכנות שנטענות בלחיצה כדי להמחיש את סגנון הפלט.

מאחורי הקלעים הקוד טוען את המודל CogView3-Plus-3B דרך ספריית הדיפיוזרים של פייתון ברמת דיוק של bfloat16. כשלוחצים על שיפור התיאור, הקוד שולח את הטקסט למודל שפה של OpenAI לפי הנחיות מוגדרות מראש, שמפרקות את הבקשה לאלמנטים ויזואליים קונקרטיים באנגלית באורך של 100 עד 200 מילים ומסירות ניסוחים מופשטים כדי לעזור למודל הציור להוציא תוצאה חדה יותר.

מתאים ל

  • בדיקת איכות יצירת תמונות

    מזינים תיאור מפורט ובודקים איך המודל מתמודד עם תאורה, סגנון וקומפוזיציה בלי להוריד משקלים למחשב.

  • ניסוי בשדרוג פרומפטים

    בודקים איך פירוק תיאור קצר לאלמנטים ויזואליים מדויקים באנגלית משפיע על מראה התמונה הסופית.

  • כיול פרמטרים מתקדמים

    משנים את כמות הצעדים ורמת ההיצמדות לטקסט כדי לראות את ההשפעה הישירה על פרטי הפלט.

איפה זה נופל

המגבלה הכי גדולה כרגע היא שההדגמה מושהית לחלוטין ולא מייצרת תמונות עד שמישהו יפעיל אותה מחדש. בנוסף, כפתור שדרוג הפרומפט מסתמך על תיאורים מפורטים באנגלית בלבד, כך שטקסט בעברית לא יעבוד בצורה תקינה בלי תרגום. שדרוג הפרומפט גם מסתיר את הביצועים האמיתיים של המודל על טקסט קצר ופשוט, כי הוא נעזר במודל שפה חיצוני כדי לפצות עליהם.

שאלות
נפוצות

האם השירות הזה עולה כסף?

השימוש בדף עצמו חינמי לחלוטין ורץ דרך הדפדפן. עם זאת, נכון לעכשיו הוא במצב מושהה ולכן אי אפשר לייצר בו תמונות בלי להפעיל אותו מחדש.

אפשר לכתוב הנחיות בעברית?

עדיף שלא. מנגנון הרחבת הפרומפטים בקוד מתוכנת להחזיר תיאורים באנגלית בלבד, והמודל עצמו עובד בצורה המיטבית עם אנגלית.

האם אפשר להריץ את המודל על המחשב שלי?

כן, הקוד מבוסס על Diffusers וטוען את המשקלים של CogView3-Plus-3B ממאגר ציבורי. כדי לעשות את זה מקומית תצטרכו מחשב עם כרטיס מסך מתאים וסביבת פייתון מוגדרת.

למה התוצאה כאן שונה מהרצת המודל הבסיסי?

מפני שהממשק כולל כפתור שמעביר את הבקשה דרך מודל שפה של OpenAI שמרחיב אותה. אם משתמשים באפשרות הזו, המודל מקבל טקסט ארוך ומקצועי בהרבה ממה שהקלדתם במקור.

איך משתמשים

כותבים פרומפט באנגלית, ואם רוצים לוחצים קודם על Enhance Prompt כדי להרחיב אותו. אחרי שבוחרים מידות וערכי ריצת מודל בהגדרות המתקדמות, לוחצים על Run. כרגע לא ניתן להריץ את ההדגמה הזו בפועל כי השרת שלה נמצא במצב מושהה. בנוסף, חומרת הבסיס שהוגדרה לה היא מעבד רגיל, מה שאומר שגם כשהיא פעילה יצירת תמונה תהיה איטית מאוד ביחס לכרטיס מסך ייעודי.

הרישיון

הרישיון של הדף לא דווח במאגר. במצב כזה אין אישור מפורש להשתמש בתמונות שנוצרות לצרכים מסחריים, ואי אפשר לדעת מה הזכויות המשפטיות על הקבצים בלי לבדוק ישירות את תנאי השימוש של יוצרי המודל.

הרישיון המלא ב־Hugging Face ↗