Pixart-Sigma
רץ בדפדפןartificialguybrרישיון לא דווח2024-04-14
הדגמה פשוטה של מחולל תמונות מטקסט שמבוסס על סדרת מודלי PixArt. מתאימה למי שרוצה לבדוק הנחיות טקסט ישירות בדפדפן בלי להתקין סביבת פיתוח.
- —הורדות בחודש
- 164לייקים
מה זה
אתם כותבים תיאור טקסטואלי ומקבלים תמונה בפורמט חזותי ישירות למסך. הממשק נותן לשלוט גם בהנחיה שלילית, במספר צעדי הריצה, בעוצמת ההיצמדות לטקסט ובמידות התמונה בפיקסלים. יש בממשק גם דוגמאות מוכנות מראש שאפשר לטעון בלחיצה כדי לראות מה מתקבל.
מאחורי הקלעים הקוד טוען את PixArt-Sigma דרך ספריית diffusers, יחד עם מודלים נוספים כמו מקודדי הטקסט t5 ו־mt5, ורכיבי פענוח תמונה דוגמת sdxl-vae ו־consistency-decoder של OpenAI. השילוב הזה מטפל בהבנת הטקסט והמרתו לתמונה נקייה ברזולוציה הרצויה.
מתאים ל
- בדיקת פרומפטים
ניסוי מהיר של תיאורי תמונה באנגלית ובדיקת התגובה של מודל PixArt-Sigma.
- יצירת תמונות מרובעות
הפקת איורים בסיסיים בגודל 512 על 512 פיקסלים לשימוש מיידי.
- השוואת הגדרות הנחיה
בדיקה איך שינוי ערכי ה־Guidance Scale משפיע על הדיוק מול הטקסט.
איפה זה נופל
הממשק בסיסי מאוד ונועד ליצירה ישירה בלבד, בלי אפשרות להעלות תמונת מקור לשינוי או להשתמש במסכות. בנוסף, אם תעלו את הרזולוציה לכיוון 2048 פיקסלים או תבחרו 100 צעדים, הריצה יכולה להיכשל בגלל מגבלות זיכרון של כרטיס המסך המשותף, כפי שמעידות הודעות השגיאה הישירות שהוגדרו בקוד.
שאלות
נפוצות
האם השימוש עולה כסף?
הכלי זמין לשימוש חופשי בדפדפן ללא תשלום. אין צורך להכניס כרטיס אשראי או לשלם על יצירת תמונות בודדות. המשאבים מגיעים מחומרת שיתוף שמוקצית בענן.
מה קורה לטקסט ולתמונות שנוצרות?
הנתונים שאתם מקלידים נשלחים לשרת לצורך עיבוד היצירה בלבד. התמונות מופיעות על המסך שלכם בסיום התהליך. עם זאת, מדובר בסביבה ציבורית פתוחה ולכן עדיף לא להזין טקסטים רגישים.
כמה זמן לוקח לייצר תמונה?
בברירת המחדל של 20 צעדים וגודל 512 התהליך לוקח בדרך כלל מספר שניות. אם השרת נמצא בהמתנה להקצאת חומרה ייתכן עיכוב קצר נוסף. בחירה בערכי רזולוציה גבוהים תאריך את זמן ההמתנה באופן מורגש.
האם אפשר להריץ את זה מקומית?
כן, הקוד מבוסס על ספריות סטנדרטיות וטוען מודלים ציבוריים שזמינים להורדה. תצטרכו מחשב עם כרטיס מסך מתאים וסביבת פייתון מוגדרת. הממשק עצמו בנוי ב־gradio וקל להרצה עצמאית.
איך משתמשים
מקלידים הנחיה, מכוונים את הגובה והרוחב בין 256 ל־2048 פיקסלים, ולוחצים על כפתור ההרצה. ברירת המחדל מוגדרת על 20 צעדים וגודל של 512 על 512, שזה נקודת פתיחה מהירה. הדף מוגדר על חומרת zero-a10g שמשתפת כרטיס גרפי בענן, ולכן הריצה תלויה בהקצאת המשאבים באותו רגע ועלולה להיעצר אם השרת עמוס.
הרישיון
היוצר לא הגדיר רישיון בעמוד של הפרויקט. כשאין רישיון מוצהר, תנאי השימוש במודלים ובתוצרים שנוצרים דרכם נשארים מעורפלים, ולכן לא מומלץ להסתמך על התמונות לפרויקטים מסחריים בלי לבדוק את הרישיונות המקוריים של משפחת PixArt.