ColorFlow — הדגמה

קוד פתוח

TencentARCmit2024-12-13

gradio

הכלי מיועד לצביעת איורים, סקיצות ורצפי תמונות בשחור לבן בעזרת תמונות רפרנס צבעוניות. הוא מתאים למאיירים ויוצרי קומיקס שמחפשים עקביות בצבעים של הדמויות שלהם.

11.9 GBמשקל הקבצים
—הורדות בחודש
102לייקים

מה זה

אתם מעלים תמונה לצביעה, בוחרים סגנון קלט מתוך שלוש אפשרויות שכוללות תמונה אפורה או סקיצה, ומגדירים רזולוציה. התוכנה דורשת עיבוד מקדים שהופך את התמונה לשחור לבן, ורק אז מעלים קבצי רפרנס צבעוניים להנחיית הצבע.

מאחורי הקלעים הכלי משתמש בשיטת אחזור תמונות כדי לשאוב צבעים מדויקים מהדוגמאות שהעליתם. הקוד מריץ מודלים מסוג PixArt ודיפוזיה של Stable Diffusion בשילוב רכיבי הנחיית צבע ייעודיים ומקודד ראייה של CLIP שמנתח את הרפרנסים.

הממשק כולל גלריית דוגמאות מוכנות לטעינה מהירה, ורצים בו תהליכי עיבוד שנועדו לשמור על קווי הציור המקוריים בזמן שהאלגוריתם שופך פנימה את הגוונים המתאימים.

מתאים ל

צביעת פאנלים בקומיקס
שמירה על גווני בגדים ועור אחידים לאורך סצנות שלמות על ידי העלאת ציור קודם כרפרנס.
החייאת סקיצות ידניות
הפיכת רישומי עיפרון או דיו לאיורים צבעוניים לפי פלטת צבעים שמוגדרת מראש.
שחזור צבע בתמונות מסך
צביעה מחדש של פריימים מתוך אנימציה ישנה בשחור לבן באמצעות תמונות מקור בודדות.

איפה זה נופל

הבעיה המיידית היא שהספייס פשוט שבור ולא עולה. מעבר לזה, אתם מוגבלים לשלוש רזולוציות בלבד, 640 על 640 או 512 על 800 בכיוונים שונים, כך שתמונות ביחס אחר ייחתכו או יעברו עיוות. הכלי גם מחייב אתכם לעבור שלב מקדים של שטיפת צבע גם אם העליתם סקיצה נקייה, ולא יאפשר צביעה בלעדיו.

שאלות
נפוצות

האם אפשר להשתמש באפליקציה כרגע?

לא. האפליקציה נמצאת במצב שגיאת בנייה בשרת, ולכן הממשק אינו זמין להרצה חיה עד שהמפתחים יתקנו את התלויות.

האם הכלי פתוח בחינם?

כן, השימוש בדף הזה בהאגינג פייס הוא ללא עלות ואינו דורש תשלום. עם זאת, בגלל שהשרת מבוסס על משאבים שיתופיים, זמני ההמתנה עשויים להשתנות ברגע שהשירות יחזור לפעול.

אפשר להריץ את ColorFlow על המחשב שלי?

כן, הקוד פתוח תחת רישיון GPL 3.0 ומאפשר הורדה מגיטהאב. תצטרכו כרטיס מסך של אנבידיה עם מספיק זיכרון כדי לטעון את מודלי הדיפוזיה ומשקלי ה־PixArt.

איך מריצים

בפועל אתם לא יכולים להריץ את הדמו כרגע בדפדפן, כי הספייס נמצא במצב של שגיאת בנייה. במצב תקין העבודה דורשת בחירת סגנון, לחיצה על כפתור עיבוד מקדים, העלאת תמונות עזר, ורק אז לחיצה על כפתור הצביעה. מוגדרת שם חומרת A10G שמאפשרת הסקה מהירה תוך שניות בודדות, אבל עד שהקוד יתוקן לא ניתן ללחוץ על כלום.

pip install -U huggingface_hub
hf download TencentARC/ColorFlow

הקבצים

25 קבצים במאגר, 11.9 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הקוד מופץ תחת רישיון GPL 3.0, מה שאומר שכל שינוי או הטמעה שתעשו בקוד מחייבים שחרור של המוצר שלכם תחת אותו רישיון קוד פתוח. לגבי התמונות שאתם מעלים והתוצאות שנוצרות, הרישיון אינו מנכס עליהן בעלות, אך העלאה לרשת ציבורית חושפת אותן ברמת השרת.

שימוש מסחרי
שינוי הקוד
הפצה מחדש

הרישיון המלא בעמוד המודל ↗