controlnet-tile-sdxl-1.0

מה זה

מדובר במודל בקרה של 1.3 מיליארד פרמטרים שמתלבש מעל SDXL, ומיועד לשלוש משימות עיקריות: תיקון טשטוש, יצירת וריאציות לסגנון קיים, והגדלת תמונות לרזולוציה גבוהה יותר. בתיקון טשטוש הוא לוקח תמונה חסרת חדות וממלא מחדש פרטים אבודים על בסיס הקומפוזיציה.

הוא תומך בהגדלת רזולוציה בכל יחס תמונה ובכל מכפיל, כמו הדוגמאות של פי שלושה על שלושה שמופיעות בתיעוד שלו. במקום להמציא תמונה חדשה מאפס, מנגנון ה־Tile מכריח את SDXL להיצמד לחלוקת הצבעים והאובייקטים הקיימת, ובמקביל מאפשר לייצר גרסאות שונות של אותה תמונה באמצעות פרומפטים מפורטים.

מתאים ל

• תיקון תמונות מטושטשות

  המודל צובע מחדש ומחדד אזורים מטושטשים בלי לאבד את המבנה והצבעים המקוריים.

• הגדלת תמונות בכל גודל

  מגדיל רזולוציה בלי להיות מוגבל ליחסי תמונה קבועים מראש, למשל הגדלה של פי תשעה בשטח.

• גרסאות חלופיות לתמונה

  מאפשר לשנות סגנון או להוסיף פרטים בעזרת פרומפט מפורט תוך נעילת הקומפוזיציה.

איפה זה נופל

היוצר עצמו מציין שבמשימות סופר-רזולוציה והגדלה הביצועים עלולים להיות לא יציבים, ושהגרסה הבאה אמורה לתקן את זה. זה אומר שאי אפשר לסמוך עליו בעיוורון לכל משימת אפסקייל בקו ייצור, אלא חייבים לבדוק נקודתית איך הוא מתמודד עם התמונות שלכם לפני שמשלבים אותו בזרימת עבודה קבועה.

איך מריצים

את המשקלים, שתופסים 2.3 גיגה-בייט, מריצים בעזרת ספריית diffusers בפייתון, יחד עם מודל בסיס של SDXL. קוד העיבוד מבוסס על פרה-פרוססורים מוכרים של קונטרול-נט, כולל יישומי tile קיימים מקהילת הקוד הפתוח.

בגלל שמדובר בתוספת מעל SDXL, תצטרכו כרטיס מסך עם זיכרון וידאו שיכול להחזיק את שני המודלים במקביל, בדרך כלל לפחות 16 גיגה-בייט כדי לא להיתקע. אם אין לכם חומרה כזו מקומית בענן או במשרד, עדיף להריץ אותו דרך שירות שמציע תשתית GPU מוכנה לפי שימוש.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("xinsir/controlnet-tile-sdxl-1.0")
img = pipe("a photo").images[0]

הקבצים

20 קבצים במאגר, 2.3 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• diffusion_pytorch_model.safetensors2.5 GB
• masonry.webp4.2 MB
• 000039_tile_var_concat.webp1.6 MB
• 000003_tile_var_concat.webp840.5 KB
• 000118_tile_blur_concat.webp724.7 KB
• 000003_scribble.webp689.2 KB
• 000030_tile_var_concat.webp536.1 KB
• 000053_scribble.webp443.3 KB
• 000139_tile_blur_concat.webp398.6 KB
• 000018_tile_var_concat.webp278.7 KB
• 000129_tile_blur_concat.webp238.3 KB
• 000126_tile_blur_concat.webp216.1 KB
• 000008_tile_var_concat.webp216.0 KB
• 000003.webp147.9 KB
• 000132_tile_blur_concat.webp131.8 KB
• 000053.webp81.4 KB
• README.md10.4 KB
• guided_filter.py9.2 KB
• .gitattributes1.6 KB
• config.json1.2 KB

הרישיון

רישיון apache-2.0 מתיר שימוש חופשי לחלוטין, כולל שימוש מסחרי מלא, שינוי הקוד והפצה מחדש בתוך מוצרים. הדרישה העיקרית היא לצרף עותק של הרישיון המקורי ומתן קרדיט ליוצר, בלי שום הגבלה על מכירת השירות שבו המודל פועל.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗