GPT
הוספת כלי
C

control_v1p_sd15_brightness

קוד פתוח

latentcatcreativeml-openrail-m2023-04-19

  • diffusers
  • safetensors
  • image-to-image
  • controlnet
  • en

מתאם ControlNet שמתלבש על סטייבל דיפיוז'ן ומתמקד בשליטה על תאורה וצבע. מתאים למי שרוצה לצבוע תמונות שחור-לבן או לשנות צבעים קיימים בלי לפרק את הקומפוזיציה.

  • 361Mפרמטרים
  • 1.3 GBמשקל הקבצים
  • 893הורדות בחודש
  • 195לייקים

מה זה

מדובר במודל שפותח על ידי ciaochaos ומבוסס על ארכיטקטורת ControlNet עבור גרסת SD 1.5. המטרה שלו פשוטה, הוא מקבל תמונה כעוגן בהירות ומאפשר להזריק צבע מחדש או לצבוע תמונות שחור-לבן ישנות, תוך שמירה על יחסי האור והצל המקוריים של הפריים.

בניגוד למודלי בסיס שמנסים לדמיין סצנה שלמה מטקסט, כאן מדובר ברשת בקרה של 361 מיליון פרמטרים. היא עובדת לצד המודל הראשי, קוראת את מפת הבהירות, ומחייבת את תהליך הדיפיוז'ן להישאר צמוד למבנה האור הקיים. כרטיס המודל לא מציג מדדי ביצועים מספריים או בנצ'מרקים, כך שקשה לדעת מראש עד כמה הוא מדויק בשמירה על פרטים עדינים מעבר למה שנראה בהדגמות.

מתאים ל

  • צביעת תמונות ישנות

    צביעה מחדש של צילומי שחור-לבן היסטוריים תוך שמירה על ערכי הבהירות והצל המקוריים.

  • שינוי פלטת צבעים

    החלפת גוונים ואווירה בתמונות קיימות בלי להרוס את התאורה המקורית של הפריים.

  • עבודה ב־Web UI

    שילוב מהיר בתוך ממשק Automatic1111 כתוסף שליטה לתהליכי עבודה קיימים של SD 1.5.

איפה זה נופל

כרטיס המודל ריק כמעט לחלוטין בכל מה שנוגע למגבלות, הטיות וסיכונים. היוצר ציין שם רק שחסר מידע, וזה דגל אדום לכל מי שרוצה להכניס אותו לפרודקשן בלי לבדוק קודם ידנית עשרות מקרים.

בנוסף, כיוון שהוא נשען על SD 1.5, הוא סוחב איתו את כל המגבלות של הפלטפורמה ההיא ברזולוציות, עיוותי פנים וטקסטורות מורכבות. המודל מתמחה בבהירות בלבד, כך שאם התמונה המקורית כוללת קונטרסט בעייתי או שריפות אור, הוא עלול לקבע את הפגמים האלה במקום לתקן אותם.

שאלות
נפוצות

האם אפשר להריץ את המודל הזה לבד בלי מודל נוסף?

לא. זהו מתאם ControlNet ולא מודל עצמאי ליצירת תמונות. כדי להשתמש בו צריך לטעון אותו במקביל למודל בסיס תואם של Stable Diffusion 1.5.

האם המודל יתקן תמונות חשוכות מדי?

לא בהכרח. התפקיד שלו הוא להשתמש במפת הבהירות הקיימת כדי להנחות את הצבע, ולא לשמש ככלי להבהרת תמונות. אם הקלט חשוך לגמרי, סביר להניח שגם התוצאה תישאר כהה.

איך מריצים

הקבצים שוקלים 1.3 גיגה-בייט, שזה משקל קל מאוד יחסית לעולם התמונות. אפשר לטעון אותו בספריית diffusers בקוד פייתון פשוט, או לשים אותו בתיקיית המודלים של Automatic1111 web UI אם אתם עובדים עם ממשק גרפי מקומי.

בגלל שזה רק מתאם ולא מודל ג'נרציה מלא, צריך לטעון אותו במקביל למודל הבסיס של SD 1.5. כרטיס מסך ביתי עם 8 גיגה זיכרון יריץ אותו בלי להזיע, ולכן אין סיבה לפנות לפתרונות ענן בתשלום או ל־API חיצוני אלא אם אתם בונים שירות שצריך לשרת עשרות משתמשים במקביל.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("latentcat/control_v1p_sd15_brightness")
img = pipe("a photo").images[0]

הקבצים

4 קבצים במאגר, 1.3 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הרישיון הוא CreativeML OpenRAIL M. הוא מתיר שימוש מסחרי, אבל כולל רשימת הגבלות אתיות על שימושים פוגעניים, זיוף תוכן והפרת חוק, ומחייב אתכם להעביר את אותם תנאים הלאה למי שמקבל מכם את המודל או נגזרות שלו.

  • שימוש מסחרי
  • שינוי הקוד
  • מגבלות שימוש ברישיון

הרישיון המלא בעמוד המודל ↗