ERNIE-Image
קוד פתוחComfy-Orgapache-2.02026-04-13
גרסה ארוזה מחדש של מודל התמונות הסיני מבית באידו, מסודרת לעבודה ישירה בתוך קומפי. אם אתם בונים פייפליין מקומי מבוסס נודים, זה חוסך את ההתאמות הידניות.
- 43.8 GBמשקל הקבצים
- 78,373הורדות בחודש
- 192לייקים
מה זה
מדובר בחבילת קבצים שצוות קומפי ארגן מחדש מתוך המאגרים המקוריים של באידו, במטרה להריץ את יצירת התמונות ישירות בממשק המוכר בלי להסתבך בהמרות. המאגר מכיל שני מודלי דיפוזיה שונים, הגרסה הרגילה וגרסת הטורבו למי שמחפש מהירות דגימה גבוהה יותר, לצד מקודדי טקסט ייעודיים ורכיב ואה תואם.
השוני העיקרי כאן מול התקנות רגילות של מודלים פתוחים הוא הפירוק של המערכת לרכיבים נפרדים. יש כאן שימוש במקודד טקסט מסוג מיניסטרל שלוש וחצי מיליארד, משפר פרומפטים מובנה, ורכיב תמונה שנלקח מהעולם של פלאקס שתיים. השילוב הזה נועד לייצר הבנה טובה יותר של הנחיות טקסט מורכבות, אבל הוא גם מחייב לטעון כמה קבצים שונים במקביל כדי להוציא תמונה בודדת.
מתאים ל
- עבודה מקומית בקומפי
הקבצים מסודרים מראש למבנה התיקיות של המערכת וחוסכים הגדרות ידניות.
- רינדור מהיר עם טורבו
גרסת הטורבו הכלולה בחבילה מאפשרת לייצר תמונות בפחות צעדי דגימה.
- שילוב במערכות קוד פתוח
רישיון אפאצ'י מאפשר להכניס את הרכיבים למוצרים מסחריים בלי דרישה לחשוף קוד.
איפה זה נופל
כרטיס המודל לא חושף שום מדדי איכות, מבחני השוואה או מידע על נתוני האימון שלו. אתם מקבלים קבצים בינאריים נטו בלי לדעת איפה הוא מתקשה באנטומיה, איך הוא מתמודד עם טקסט בתוך תמונה או כמה הוא מוטה לתרבות מסוימת. בנוסף, העובדה שצריך לנהל ידנית חמישה קבצים שונים בשלוש תיקיות מגדילה את הסיכוי לשגיאות תאימות, כך שחובה לעשות בדיקות יציבות אצלכם לפני שמחברים אותו לקוד ייצור.
שאלות
נפוצות
חייבים להוריד את כל ארבעים וארבעה הגיגה כדי שזה יעבוד?
לא חובה לקחת הכל. המאגר כולל גם את גרסת הבסיס וגם את גרסת הטורבו, כך שאפשר להוריד רק את אחד ממודלי הדיפוזיה שמתאים לכם יחד עם מקודדי הטקסט והוואה.
איך המודל מתמודד עם טקסט בעברית?
אין בתיעוד שום התייחסות לעברית. מקודד הטקסט שנמצא בחבילה הוא מיניסטרל לצד רכיב שיפור פרומפטים של באידו, כך שסביר להניח שהוא מכוון לאנגלית ולסינית, ועדיף להזין לו הנחיות באנגלית.
איך מריצים
בשביל להריץ את כל הסיפור הזה צריך להוריד כמעט ארבעים וארבעה גיגה של קבצים ולפזר אותם ידנית בתיקיות של קומפי, בין תיקיית מודלי הדיפוזיה, מקודדי הטקסט והוואה. זה דורש כרטיס מסך חזק מאוד עם נפח זיכרון מכובד, אחרת הטעינה של מודל הדיפוזיה יחד עם מקודד הטקסט הכבד פשוט תפיל לכם את התהליך.
אם יש לכם כרטיס ביתי פשוט, גרסת הטורבו תעזור לקצר את זמני הרינדור אבל לא תפתור את בעיית המשקל העצום בזיכרון. במקרים כאלה, או אם אתם סתם רוצים לבדוק איך הוא מגיב לפרומפטים בלי לחנוק את המחשב, עדיף בהרבה לפנות לשרת מרוחק או שירות ענן שמחזיק אותו מוכן.
pip install -U huggingface_hub hf download Comfy-Org/ERNIE-Image
הקבצים
7 קבצים במאגר, 43.8 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הרישיון המדווח הוא אפאצ'י שתיים אפס. מותר להשתמש בו לצרכים מסחריים, לשנות את הקבצים, להטמיע אותו במוצרים סגורים ולהפיץ הלאה, כל עוד שומרים על הודעת זכויות היוצרים והרישיון המקורי.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים