StableSR — הדגמה

קוד פתוח

Iceclearother2023-08-18

gradio

הכלי מיועד למי שרוצה לשחזר ולהגדיל תמונות ישנות או מטושטשות בעזרת מודל דיפוזיה. אתם מעלים קובץ תמונה ומקבלים גרסה חדה ומוגדלת.

29.7 GBמשקל הקבצים
—הורדות בחודש
49לייקים

מה זה

התהליך מתחיל בהעלאת תמונה לממשק, בחירת יחס הגדלה והתאמת פרמטרים שמשפיעים על התוצאה הסופית. בצד של הפלט מקבלים תצוגה של התמונה המעובדת וקישור מסודר להורדת הקובץ באיכות מלאה ישירות למחשב שלכם.

מאחורי הקלעים רץ מודל דיפוזיה מבוסס המאמר המדעי מבית Iceclear, שמשתמש בידע מוקדם של מודלים גנרטיביים כדי לשחזר פרטים אמיתיים בתמונות שסובלות מרעש, טשטוש ודחיסה. הקוד כולל בחירה בין שני מודלים, גרסת 512 או 768v, שליטה במספר צעדי הדגימה מ־10 עד 1000, ואיזון נאמנות למקור דרך מדד CFW. יש כאן גם אלגוריתמים מובנים לתיקון צבע כמו adain או wavelet כדי למנוע הסטות גוונים בתמונה הסופית.

הממשק כולל דוגמאות מוכנות מראש שנשמרו במטמון, כך שאפשר לבדוק את התנהגות המערכת על תמונות נתונות לפני שמעלים קבצים אישיים.

מתאים ל

שחזור תמונות פגומות
מנקים טשטוש, רעש דיגיטלי ודחיסה מקבצים ישנים לקבלת מראה נקי.
הגדלת תמונות ממוקדת
מגדילים רזולוציה עם פקטור מותאם אישית תוך שמירה על יציבות צבע.
בדיקת מחקר לשחזור
משווים בין מודל 512 ל־768v ובוחנים השפעת צעדי דגימה שונים.

איפה זה נופל

הבעיה המרכזית כרגע היא הסטטוס הטכני, האפליקציה נמצאת במצב שגיאת בנייה ולכן אי אפשר להריץ אותה ישירות בדפדפן בלי לתקן את הסביבה. מעבר לזה, המודל מתמקד בשחזור תמונות ולא מייצר תוכן חדש מאפס מטקסט. אם תעלו תמונה עם פנים שנהרסו לחלוטין או רעש כבד מדי, המודל עלול להמציא מרקמים שלא היו שם במקור בגלל אופי הדיפוזיה.

שאלות
נפוצות

האם האפליקציה עובדת כרגע בדפדפן?

לא, המצב שלה מוגדר כשגיאת בנייה ולכן אי אפשר להריץ תמונות כרגע. כדי להשתמש בה תצטרכו להמתין לעדכון מהיוצר או להוריד את הקוד ולהריץ בעצמכם. שווה לעקוב אחרי המאגר כדי לראות מתי הבעיה נפתרת.

האם השימוש בכלי עולה כסף?

הגישה לממשק באתר היא ללא תשלום ואינה דורשת מנוי. עם זאת, בגלל שההרצה המקורית נשענת על חומרת שרת מסוג a10g-large, הרצה פרטית משלכם בענן תדרוש משאבים שעולים כסף. כל עוד הממשק הציבורי תקול, אין גישה חינמית פעילה.

האם אפשר להריץ את המערכת מקומית?

כן, הקוד מבוסס על ספריות פייתון ופרויקטים סטנדרטיים כמו PyTorch Lightning ו־Gradio. תצטרכו כרטיס מסך חזק עם זיכרון ייעודי כדי להתמודד עם מודל הדיפוזיה ומשקלי 512 או 768v. ההתקנה דורשת ידע בסיסי בסביבות פייתון והורדת משקלי המודל.

מה קורה לתמונות שאני מעלה?

הקבצים נשלחים לעיבוד על גבי השרת שמריץ את הממשק לצורך ביצוע פעולת השחזור. בגלל שמדובר בסביבה פתוחה וברישיון מותאם אישית, לא מומלץ להעלות חומרים רגישים או תמונות פרטיות שאינכם רוצים לחשוף. עדיף להמתין או להריץ את הקוד במחשב מבודד משלכם.

איך מריצים

נכנסים לממשק בדפדפן, טוענים קובץ לתבנית הקלט, בוחרים מודל ומשחקים עם כמות הצעדים ופקטור ההגדלה. אחרי שמסיימים לכוון, לוחצים על כפתור Run Inference וממתינים. ההרצה מוגדרת על מעבד גרפי a10g-large, אבל ברירת המחדל עומדת על 200 צעדים, כך שכל עיבוד של תמונה בודדת ייקח זמן ולא יקרה ברגע.

pip install -U huggingface_hub
hf download Iceclear/StableSR

הקבצים

12 קבצים במאגר, 29.7 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הרישיון מוגדר בתור other. זה אומר שאין כאן רישיון קוד פתוח סטנדרטי ומוכר, ולכן אסור להניח שמותר להשתמש בתוצרים לצרכים מסחריים בלי לבדוק את תנאי המאגר המקורי. לגבי התמונות שאתם מעלים, הן עוברות דרך השרת שמארח את הממשק.

הרישיון המלא בעמוד המודל ↗