CogView2
רץ בדפדפןzai-orgרישיון לא דווח2022-06-20
הדגמת רשת שמייצרת תמונות מטקסט ישירות בדפדפן. מתאימה למי שרוצה לבדוק את היכולות של המודל בלי להתקין סביבת פיתוח מקומית.
- —הורדות בחודש
- 72לייקים
מה זה
מקלידים תיאור טקסטואלי באנגלית או בשפות נתמכות, ומקבלים תמונות שנוצרות לפי ההנחיה. הממשק מחולק למצב פשוט עם תיבת טקסט וכפתור הרצה, ולמצב מתקדם שבו אפשר לבחור סגנון מתוך תפריט, להפעיל תרגום אוטומטי, לקבוע סיד, להגביל את התהליך לשלב הראשון בלבד ולבחור כמה תמונות לייצר. התוצאות מוצגות ברשת תמונות או בגלריה.
מאחורי הקלעים רצים המודלים CogView2 יחד עם הטוקנייזר icetk של אותו צוות. המערכת כוללת דוגמאות מוכנות שמשלבות טקסט עם סגנון ספציפי, כך שאפשר לראות איך בחירת פרמטרים משפיעה על התוצר הסופי לפני שמזינים טקסט חופשי.
מתאים ל
- בדיקת סגנונות עיצוב
מזינים תיאור קצר ובוחרים סגנון מהרשימה במצב המתקדם כדי לבחון איך המודל מתרגם הנחיות ויזואליות שונות.
- השוואת שלבי יצירה
מסמנים את אפשרות השלב הראשון בלבד כדי לראות את התוצר הגולמי מול עיבוד מלא של שרשרת הריצה.
- התנסות בדוגמאות מובנות
טוענים פרומפטים מתוך רשימת הדוגמאות בלחיצה אחת כדי להבין אילו ניסוחים נותנים תוצאות יציבות.
איפה זה נופל
הבעיה המרכזית כרגע היא שההדגמה תקועה במצב של שגיאת זמן ריצה, כך שאי אפשר להפיק ממנה תמונות כלל דרך הדפדפן. בנוסף, ההרצה מוגדרת על מעבד בלבד ולא על מאיץ גרפי, כך שגם כשהיא עובדת, יצירת תמונות מרובות או הפעלת שני שלבי העיבוד צפויות להיות איטיות מאוד ביחס לביצועים המקוריים של המודל.
שאלות
נפוצות
האם השימוש בהדגמה עולה כסף?
הגישה בעמוד היא בחינם ואין צורך להזין אמצעי תשלום כדי להשתמש בממשק. עם זאת, נכון לעכשיו ההדגמה מושבתת בגלל שגיאת ריצה. אם הדף יחזור לעבוד, השימוש דרך הדפדפן אינו כרוך בתשלום.
מה קורה עם הטקסט שמקלידים למערכת?
הטקסט נשלח לשרת של הדף לצורך עיבוד ויצירת התמונה, ומוצג לעיתים גם בתיבת התרגום בממשק. היוצרים לא פרסמו תנאי פרטיות מסודרים או רישיון שימוש. עדיף לא להקליד שמות פרטיים, מידע סודי או טקסטים עסקיים רגישים.
כמה זמן לוקח לייצר תמונה?
במצב הנוכחי המערכת מציגה שגיאה ולא מייצרת כלום. כשהיא פועלת, החומרה המוגדרת היא מעבד ללא מאיץ גרפי, מה שאומר שהרצה מלאה של תמונות מרובות תיקח זמן ממושך בהרבה משרת מואץ.
האם אפשר להריץ את זה מקומית במקום בדפדפן?
הקוד מבוסס על ספריות פתוחות ועל המודלים CogView2 ו־icetk שפורסמו ברשת. אפשר להוריד את הקבצים ולהריץ אותם על מחשב אישי, אך התהליך דורש ידע טכני וכרטיס מסך חזק כדי לקבל ביצועים סבירים.
איך משתמשים
בוחרים בלשונית הרצויה, כותבים תיאור בתיבת הטקסט ולוחצים על Run. במצב המתקדם אפשר לכוונן קודם מחוונים של כמות תמונות וסיד או לסמן תיבות בחירה של תרגום ושלבי עיבוד. הדף מוגדר על חומרת מעבד משודרג ללא כרטיס גרפי ייעודי, אבל בפועל הממשק נמצא כרגע בשגיאת ריצה ולא מעבד בקשות.
הרישיון
היוצרים לא דיווחו על רישיון שימוש בעמוד ההדגמה. בהיעדר רישיון מוגדר, תנאי השימוש בתמונות שנוצרות ובקוד אינם ברורים, ולא מומלץ להסתמך עליהם לצרכים מסחריים או להעלות קלט רגיש.