storyboard-sketch
קוד פתוחblink7630other2023-11-14
המתאם הזה מייצר סקיצות שחור-לבן מהירות לקולנוע וסטוריבורד ישירות מתוך הנחיות טקסט. הוא מתאים למי שבונה שוטים ראשוניים לפרויקט וידאו בלי להסתבך עם רינדורים כבדים.
- 218 MBמשקל הקבצים
- 114הורדות בחודש
- 104לייקים
מה זה
מדובר בתוסף LoRA שאומן על גבי SDXL Base בעזרת סט של 60 סקיצות סטוריבורד ופורטרטים בגוני אפור. הוא מיועד לייצר איורים מהירים ביחסי תצוגה קולנועיים כמו 21:9 ו־16:9, או ריבוע רגיל של 1:1, עבור תכנון סצנות.
ההתנהגות שלו תלויה לחלוטין בעוצמת המשקל שאתם מגדירים בהרצה. בעוצמה מלאה של 1.0 מקבלים שרטוטים מופשטים מאוד שמשאירים מקום לדמיון על חשבון הדיוק בהנחיה, בעוד שמשקל של 0.8 מייצר איזון טוב יותר בין נאמנות לטקסט לסגנון האיורי. ירידה לעוצמה של 0.5 תניב תוצאות שמרניות ומפורטות יותר שנצמדות היטב לפרומפט.
מתאים ל
- תכנון שוטים לסטוריבורד
יצירה מהירה של פריימים קולנועיים ביחסי תצוגה של 16:9 ו־21:9 לבחינת זוויות צילום ותנועה.
- סקיצות קונספט לדמויות
הפקת פורטרטים גולמיים בגוני אפור לבדיקה ראשונית של סגנון ואופי הדמות מול הצוות.
- איורי קומפוזיציה מהירים
עבודה בעוצמה נמוכה של 0.8 להנחת אלמנטים בסצנה מורכבת לפני שעוברים לעיצוב סופי.
איפה זה נופל
בגלל שהאימון התבסס על 60 תמונות בלבד, המאגר הוויזואלי שלו מוגבל מאוד. כשתעבדו בעוצמה מלאה של 1.0, המודל מאבד עקביות ומפספס פרטים חשובים מהטקסט שלכם לטובת סגנון מופשט. אם תרדו למשקל נמוך מדי כמו 0.5, תקבלו היצמדות מעולה לפרומפט אבל תאבדו חלק ניכר מאופי הרישום הייחודי.
שאלות
נפוצות
האם המודל מייצר תמונות בצבע?
לא. האימון נעשה כולו על סקיצות בגוני אפור, ולכן התוצרים מיועדים להישאר רישומים מונוכרומטיים בסגנון שחור-לבן.
באיזה משקל כדאי להגדיר את ה־LoRA בהרצה?
היוצר ממליץ על משקל של 0.8 כנקודת מוצא טובה שמספקת גם סגנון ברור וגם היצמדות סבירה להנחיות שלכם.
איך מריצים
ההורדה קטנה מאוד, 218 מגה-בייט בלבד, אבל אתם טוענים אותו מעל מודל הבסיס SDXL באמצעות ספריית diffusers. זה אומר שאתם עדיין צריכים כרטיס מסך שיכול להחזיק את SDXL בזיכרון, לרוב לפחות 12 עד 16 ג'יגה-בייט VRAM לעבודה מקומית שוטפת.
אם אין לכם חומרה ייעודית כזו בעמדה, להרים שרת GPU רק בשביל LoRA קטן יהיה יקר ומיותר. במצב כזה עדיף לחבר את המשקלים לממשק API מנוהל שתומך בתוספי SDXL ולשלם לפי קריאה במקום להחזיק תשתית דולקת.
from diffusers import DiffusionPipeline
pipe = DiffusionPipeline.from_pretrained("blink7630/storyboard-sketch")
img = pipe("a photo").images[0]הקבצים
13 קבצים במאגר, 218 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הרישיון מוגדר כ־other ולא כקוד פתוח סטנדרטי. היוצר לא פירט תנאי שימוש מסחריים בדף, ובנוסף חלות כאן ההגבלות של רישיון הבסיס של SDXL. לחברות שרוצות לשלב אותו במוצר מסחרי מומלץ לעצור ולברר את הזכויות מול המפתח לפני שמשחררים גרסה.