AuraSR-v2

מה זה

מדובר במודל מבוסס GAN להגדלת תמונות שנוצרו במחוללים, גרסה שפותחה על בסיס המחקר של GigaGAN ומימוש פתוח של lucidrains. עם 618 מיליון פרמטרים, הוא מתרכז במשימת שיפור תמונה מתמונה ופועל אחרת לגמרי ממודלי אפסקייל מבוססי דיפוזיה, שבדרך כלל דורשים המון צעדי דגימה וזמן חישוב יקר.

היתרון המרכזי במבנה כזה הוא היכולת לייצר פרטים חדים במהירות גבוהה יחסית לגודל שלו. השיטה הזו עוקפת את הצוואר בקבוק של מודלים איטיים, ומנסה לתת מענה ממוקד בדיוק לטשטושים והחוסרים שמאפיינים תמונות שנפלטו ממודלי יצירת תמונה ראשוניים.

מתאים ל

• הגדלת פלטי מחוללי תמונה

  חידוד והרחבת תמונות ראשוניות פי ארבעה, בלי להעמיס תהליך דיפוזיה נוסף וכבד.

• שילוב בצינור עיבוד מקומי

  הרצה מקומית על כרטיס מסך פשוט יחסית, הודות למשקל קבצים של 4.6 גיגה בלבד.

• בניית שירותי תמונה מסחריים

  הטמעה ישירה בתוך מוצר רווחי בזכות רישיון Apache 2.0 המלא.

איפה זה נופל

המודל פותח ספציפית עבור תמונות שנוצרו ב־AI ולא עבור תמונות שצולמו במצלמה אמיתית, מה שאומר שהוא עלול להכניס עיוותים אם תזרקו עליו תצלומים רגילים. מעבר לזה, הכרטיס לא מפרט מדדי הערכה מסודרים, ציוני איכות או נתונים על שחזור טקסט ופרטי פנים זעירים. תצטרכו לבדוק בעצמכם איך הוא מתמודד עם ארטיפקטים בתמונות המקור שלכם לפני שתסמכו עליו.

אותה משפחה

AuraSR יצא ב־2 גרסאות שיש להן עמוד כאן. אלה האחרות, לפי כמה מורידים אותן.

איך מריצים

ההתקנה מסתכמת בהתקנת חבילת aura-sr וטעינה ישירה של המשקולות דרך ספריית פייתון ייעודית. הקבצים שוקלים 4.6 גיגה-בייט, כך שכרטיס מסך מודרני עם שמונה גיגה זיכרון יספיק כדי להחזיק אותו בזיכרון ולהריץ את פונקציית האפסקייל על תמונות יחידות.

אם אתם צריכים לטפל באלפי תמונות בו-זמנית בפרודקשן ואין לכם שרת עם GPU פנוי וזמין, החזקה של שרת כזה בעצמכם תעלה יותר מקריאה ל־API חיצוני. לשימוש נקודתי או כחלק מצינור עיבוד פנימי קיים, קל מאוד להרים אותו לבד.

from transformers import pipeline

pipe = pipeline("image-to-image", model="fal/AuraSR-v2")
print(pipe("שלום"))

הקבצים

6 קבצים במאגר, 4.6 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• model.ckpt2.5 GB
• model.safetensors2.5 GB
• LICENSE.md18.6 KB
• .gitattributes1.5 KB
• README.md1.0 KB
• config.json222 B

הרישיון

הרישיון הוא Apache 2.0, רישיון קוד פתוח מתירני מאוד. מותר להשתמש בו במוצרים מסחריים, לשנות את הקוד ולהפיץ אותו כחלק מתוכנה סגורה, בתנאי ששומרים על הודעת זכויות היוצרים והרישיון המקורי.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗