GPT
P

prxpixel-t2i

קוד פתוח

Photoroomapache-2.02026-06-11

  • diffusers
  • safetensors
  • text-to-image
  • prx
  • pixel-space

יש כאן גם סקירה על PhotoRoom עצמו.

מודל תמונה שמייצר פיקסלים ישירות במרחב ה־RGB בלי VAE בדרך. מבוסס על מקודד טקסט של Qwen3-VL ומתאים למי שמחפש ארכיטקטורה שונה ממודלי הדיפוזיה הרגילים.

  • 7Bפרמטרים
  • 16.3 GBמשקל הקבצים
  • 1,427הורדות בחודש
  • 51לייקים

מה זה

מדובר במודל טקסט לתמונה בגודל של שבעה מיליארד פרמטרים מבית פוטורום, שנשען על ארכיטקטורת שנאי בשם PRXTransformer2DModel ומכוון לרזולוציה של 1024 פיקסלים. ההבדל המרכזי בינו לבין מודלים נפוצים כמו Stable Diffusion הוא הוויתור המוחלט על VAE. המודל מבצע את תהליך הדיפוזיה ישירות על פיקסלים גולמיים במקום לעבוד במרחב לטנטי מכווץ, ומשתמש בסקדיולר מסוג FlowMatchEulerDiscreteScheduler.

במקום מקודדי הטקסט השגרתיים ממשפחת T5 או Gemma, המערכת כאן נשענת על מגדל הטקסט של Qwen3-VL לצורך הבנת הפרומפט וההנחיות. בנוסף, המודל משלב את רזולוציית היצירה ישירות לתוך מודולציית צעדי הזמן ומכיל היטל צוואר בקבוק של טלאים. כרטיס המודל מציג את המבנה הטכני הזה נטו, ללא מבחני ביצועים כמותיים או השוואות איכות רשמיות מול מודלים קיימים.

מתאים ל

  • מחקר ארכיטקטורות תמונה

    בדיקת איכות של יצירה ישירה במרחב הפיקסלים ללא VAE בהשוואה למודלים לטנטיים מקבילים.

  • פיתוח צינורות יצירה סגורים

    בניית שירות תמונות עצמאי ברישיון חופשי שמשתמש במקודד Qwen3-VL להבנת טקסט.

  • הפקת תמונות ברזולוציה גבוהה

    יצירת תמונות מוגדרות מראש ל־1024 פיקסלים באמצעות סקדיולר של זרימה ישירה.

איפה זה נופל

הקוד עדיין לא חלק מהשחרור הרשמי של diffusers ומחייב התקנה ישירה מענף פיתוח, מה שאומר שכל עדכון תלויות עלול לשבור לכם את הריצה בפרודקשן. מעבר לזה, הכרטיס לא מספק נתוני בנצ'מרק, לא מפרט תמיכה בשפות אחרות מלבד אנגלית, ואין מידע על התנהגות מול פרומפטים מורכבים. יצירה ישירה במרחב הפיקסלים ללא VAE עלולה לגבות מחיר חישובי כבד, ותצטרכו לבדוק בעצמכם את איכות הפרטים הקטנים.

שאלות
נפוצות

אפשר להריץ את המודל ישירות מהספרייה הרגילה של diffusers?

לא כרגע. צריך להתקין את הספרייה ישירות מענף prx-pixel-pipeline בגיטהאב ולוודא שגרסת transformers היא 4.57 לפחות, אחרת המודל לא ייטען.

האם המודל מבין עברית בפרומפטים?

בכרטיס המודל אין שום אזכור לתמיכה בעברית ודוגמת הקוד באנגלית בלבד. כדאי להניח שהוא מצפה לפרומפטים באנגלית או לבדוק תרגום מראש.

איך מריצים

כדי להריץ אותו תצטרכו להתקין גרסה ספציפית של diffusers מענף גיטהאב ייעודי וגרסת transformers 4.57 ומעלה, כי התמיכה בצינור הזה עדיין לא שוחררה בגרסה הרשמית היציבה. הקבצים שוקלים 16.3 גיגהבייט והמודל דורש bfloat16, כך שתצטרכו כרטיס מסך עם לפחות 24 גיגהבייט זיכרון כדי לטעון אותו ולהפיק תמונות בלי חניקות זיכרון.

ברירת המחדל בקוד ההרצה מכוונת ל־28 צעדי הסקה עם מדד הנחיה של 5.0. אם אין לכם חומרה ייעודית בענן או GPU מקומי חזק מאוד, ההרצה העצמאית תהיה כבדה ואיטית מדי לעבודה שוטפת.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("Photoroom/prxpixel-t2i")
img = pipe("a photo").images[0]

הרישיון

רישיון Apache 2.0 מלא. אפשר להשתמש בו לצרכים מסחריים, לשנות את הקוד ולהפיץ אותו במוצר שלכם, כל עוד שומרים על הודעות זכויות היוצרים וקובצי הרישיון המקוריים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗