PixArt-Sigma — הדגמה
קוד פתוחPixArt-alphaopenrail++2024-04-11
הדגמת דפדפן שמייצרת תמונות מטקסט ישירות מתוך המודל של PixArt. היא מתאימה למי שרוצה לבדוק את איכות הפלט של גרסת סיגמא בלי להגדיר סביבת פיתוח מקומית.
- 9.2 GBמשקל הקבצים
- —הורדות בחודש
- 244לייקים
מה זה
אתם כותבים תיאור טקסטואלי באנגלית, לוחצים על כפתור ההרצה ומקבלים תמונות בגלריה. הממשק מאפשר לקבוע מידות רוחב וגובה, לבחור סגנון, להגדיר פרומפט שלילי, ולקבוע את מספר התמונות שייווצרו בכל הרצה. יש שם גם שליטה במספר הצעדים ובמדדי ההנחיה לפי סוג הדוגם שנבחר.
מאחורי הקלעים רץ מודל הטרנספורמר PixArt-Sigma, ספציפית בגרסת XL 1024, יחד עם טקסט אנקודר מסוג T5. כדי לפענח את התמונה הסופית המערכת טוענת את consistency-decoder של OpenAI, שמחליף את ה־VAE הרגיל במטרה לייצר פרטים נקיים יותר. בקוד מוטמעות גם דוגמאות מוכנות שאפשר להקליק עליהן כדי לראות פרומפטים מוגדרים מראש ואיך הם מתורגמים לתוצאה.
מתאים ל
- בדיקת איכות של המודל
בוחנים איך הארכיטקטורה מתמודדת עם פרומפטים מורכבים לפני שמורידים עשרות ג'יגה של משקולות למחשב.
- יצירת דימויים מהירה
מפיקים תמונות ברזולוציה של עד 1024 פיקסלים ישירות מהדפדפן בלי צורך בכרטיס מסך חזק.
- השוואת דוגמים ופרמטרים
משנים ערכי guidance scale ובודקים את ההבדל בין SA-Solver לבין DPM-Solver על אותו הפרומפט.
איפה זה נופל
הממשק אינו מיועד לעבודה שוטפת בפרודקשן. מגבלות הזיכרון והזמן של חומרת ה־ZeroGPU עשויות לקטוע ריצות כבדות, במיוחד אם מנסים לייצר רצף של תמונות ברזולוציה מקסימלית עם מספר צעדים גבוה. בנוסף, המודל אומן בעיקר על אנגלית, כך שהזנת טקסט בעברית צפויה להניב תוצאות שגויות או לא קשורות. אין כאן אפשרויות עריכה מתקדמות כמו Inpainting או העלאת תמונת מקור לשינוי.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
לא, השימוש בממשק הזה פתוח ואינו דורש תשלום. כל עוד מריצים את הבדיקות דרך הדפדפן, המשאבים מסופקים ללא חיוב. אם תרצו לשכפל את החלל לחומרה פרטית משלכם, תצטרכו לשלם על זמן הענן.
האם צריך להתקין משהו על המחשב?
אין צורך בהתקנה מקומית או בהחזקת כרטיס מסך ייעודי. כל החישובים נעשים על השרת המרוחק שמריץ את Gradio. כל מה שצריך זה דפדפן אינטרנט מעודכן וחיבור רשת יציב.
במה הממשק הזה שונה מהרצת הקוד המקורי?
הקוד המקורי מ־GitHub מאפשר לשלב את המודל בפרויקטים עצמאיים, לאמן משקולות ולבצע אוטומציות בלי הגבלת זמן ריצה. הממשק הנוכחי מציע רק טופס קלט פשוט ומוגבל ליכולות שנחשפו בו מראש.
האם המודל מבין פרומפטים בעברית?
הטקסט אנקודר אומן בעיקר על מאגרי מידע באנגלית. אם תזינו תיאור בעברית, המודל יתקשה לפרש אותו וסביר להניח שהפלט לא יתאים לכוונה המקורית. עדיף לכתוב את הפרומפטים באנגלית בלבד.
איך מריצים
נכנסים לדף, מקלידים פרומפט בשדה הייעודי ולוחצים על Run. אין צורך בהרשמה או בהתחברות כדי להתחיל לעבוד. אפשר להשאיר את ה־seed אקראי או לנעול אותו על מספר מסוים כדי לשחזר תוצאות, וכן לבחור בין סוגי סקדולרים כמו DPM-Solver או SA-Solver.
העיבוד מתבצע על גבי מעבד גרפי מדגם A10G דרך תשתית ZeroGPU. מכיוון שמדובר במשאב שיתופי שמקצה זמן עיבוד לפי דרישה, ייתכן שתמתינו בתור קצר אם יש עומס של משתמשים באותו רגע. זמן היצירה מושפע ישירות ממספר התמונות ומכמות הצעדים שהגדרתם בסליידרים.
pip install -U huggingface_hub hf download PixArt-alpha/PixArt-Sigma
הקבצים
6 קבצים במאגר, 9.2 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
המודל והקוד מופצים תחת רישיון openrail. מותר להשתמש בהם למחקר וליצירה, אך הרישיון כולל הגבלות שימוש שמטרתן למנוע הפקת תכנים מזיקים, פוגעניים או בלתי חוקיים. התמונות שנוצרות שייכות לכם בכפוף לתנאים אלה.
- שימוש מסחרי
- שינוי הקוד
- מגבלות שימוש ברישיון