חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
Z

z-image-6b-pixel-space

רץ בדפדפן

multimodalartapache-2.02026-05-22

  • gradio

הדגמה זו מייצרת תמונות טקסט ישירות במרחב הפיקסלים בלי VAE, ברזולוציה של עד 1024 פיקסלים. היא מתאימה למי שרוצה לבדוק את ארכיטקטורת L2P על בסיס מודל Z-Image.

  • —הורדות בחודש
  • 64לייקים

מה זה

אתם כותבים תיאור טקסט ומקבלים תמונה בפורמט ויזואלי ישיר. המערכת מחברת בין משקלי הבסיס של Z-Image-Turbo מבית Tongyi-MAI לבין מימוש L2P מבית מחקר Tencent Youtu שנלקח מהמאגר של zhen-nan. השילוב הזה מריץ מודל DiT של שישה מיליארד פרמטרים שאומן מחדש לפעול מקצה לקצה ישירות על פיקסלים, בלי שלב הדחיסה והפענוח של מקודד VAE שקיים ברוב מודלי הדיפוזיה.

בממשק תמצאו דוגמאות מובנות שנשמרו מראש כדי לראות את איכות הפלט בלי להמתין. בנוסף לתיאור הראשי, אפשר להגדיר תיאור שלילי ולשלוט ידנית על מימדי התמונה, מספר צעדי הדיפוזיה, עוצמת ההנחיה של הטקסט וערך הסיד לשחזור מדויק.

מתאים ל

  • בדיקת איכות פיקסלים

    בחינה מעשית של יצירת תמונות ללא עיוותי דחיסה של מקודד VAE ברזולוציה גבוהה.

  • הפקת תמונות מטקסט

    יצירת תמונות מרובעות או מלבניות של עד 1024 על 1024 פיקסלים לפי תיאור מילולי.

  • ניסוי בפרמטרי דיפוזיה

    כוונון ידני של צעדי ריצה ועוצמת הציות להנחיה כדי למצוא את האיזון המדויק.

איפה זה נופל

היישום מוגבל ליצירת תמונות מטקסט בלבד, ואי אפשר להעלות תמונה קיימת לעריכה או הכוונה. חומרת ה־A10G מנוהלת לפי תור ומגבלות זמן, כך שהרצה של מאה צעדים או רזולוציות מירביות עלולה להתעכב או להיעצר אם חורגים מהמכסה. בנוסף, חובה להזין טקסט כדי להריץ, שכן השארת שדה ריק מקפיצה שגיאה מיידית.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

ההדגמה פתוחה וזמינה לשימוש ללא תשלום ישיר בדפדפן. היא רצה על גבי מאיץ גרפי שיתופי, ולכן ייתכנו הגבלות שימוש זמניות אם תנצלו יותר מדי זמן עיבוד ברצף.

כמה זמן לוקח לייצר תמונה?

המשך תלוי בעיקר במספר הצעדים שתבחרו, כאשר ברירת המחדל עומדת על שלושים צעדים. על גבי כרטיס המסך A10G הפעולה נמשכת בדרך כלל כמה עשרות שניות, וישנו מד התקדמות שמציג את הקצב בזמן אמת.

האם אפשר להריץ את זה מקומית על המחשב?

כן, הקוד מסתמך על ספריות פתוחות ומשקלים הזמינים להורדה חופשית. עם זאת, מדובר במודל שכולל שישה מיליארד פרמטרים ועיבוד ישיר בפיקסלים, מה שדורש כרטיס מסך חזק מאוד עם זיכרון וידאו משמעותי כדי להריץ אותו עצמאית.

במה הכלי הזה שונה ממודל Z-Image הרגיל?

הגרסה הזו משלבת את שיטת L2P ומאמנת את המודל מחדש לעבוד ישירות על הפיקסלים עצמם. במקום לדחוס את התמונה לחלל חבוי באמצעות VAE כמו ברוב הכלים, הדיפוזיה כולה מתרחשת מקצה לקצה על התמונה המלאה.

איך משתמשים

מקלידים תיאור בשדה הטקסט ולוחצים על Generate. ברירת המחדל מוגדרת לרזולוציית 1024 על 1024 עם שלושים צעדים וערך הנחיה של 2.0. המודל רץ בענן על גבי מאיץ מדגם A10G דרך תשתית ZeroGPU, מה שמחייב הקצאת משאבים דינמית. היצירה לא מיידית ולוקחת זמן לפי עומס הצעדים, אך מד ההתקדמות מציג את קצב הריצה בזמן אמת.

הרישיון

הפרויקט מפורסם ברישיון קוד פתוח מסוג Apache 2.0, שמאפשר שימוש חופשי וגם מסחרי בקוד. התמונות שנוצרות מופקות על ידי המודל עבורכם, אך כדאי לבדוק את תנאי המאגרים המקוריים של Tencent ו־Tongyi לגבי הפלטים המסחריים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗