GPT
F

flux-tarot-v1

קוד פתוח

multimodalartother2024-08-14

  • diffusers
  • text-to-image
  • flux
  • lora

המודל הזה מביא את הסגנון הגרפי של קלפי הטארוט של ריידר וייט ישירות לתוך פלוקס. אם אתם מחפשים קו איורי קלאסי מראשית המאה העשרים, הוא תופס אותו בלי צורך בהנדסת פרומפטים מורכבת.

  • 174 MBמשקל הקבצים
  • 310הורדות בחודש
  • 232לייקים

מה זה

מדובר בהתאמת LoRA קלת משקל ששוקלת 174 מגה בלבד, ומיועדת להרכבה ישירה מעל מודל הבסיס FLUX.1 dev. המפתח אימן אותה על סט קלפי הטארוט המקורי של ריידר וייט משנת 1920 שנמצא בנחלת הכלל, בעזרת תשתית האימון של ostris דרך שירות fal.ai. המטרה כאן מאוד ממוקדת: במקום להיאבק עם תיאורים ויזואליים ארוכים כדי לקבל מראה של הדפס עץ ישן או קלף מיסטי, המודל מזריק את הקו האיורי, הצבעוניות והקומפוזיציה של החבילה ההיסטורית ישירות לתהליך היצירה.

התוצאה נשענת על היכולות הטבעיות של פלוקס בהבנת טקסט, אבל כופה עליהן אסתטיקה של איור תחריט עתיק. כדי להפעיל את האפקט צריך להוסיף לפרומפט מחרוזת הפעלה ייעודית שהוגדרה באימון. אין כאן מודל עצמאי שלם אלא שכבת משקלים קטנה, מה שאומר שאתם מקבלים את איכות הרזולוציה והדיוק של מודל המקור, רק בתחפושת של איורי ראשית המאה הקודמת.

מתאים ל

  • איור חבילות קלפים מקוריות

    הפקת סדרות איורים עקביות בסגנון וינטג' היסטורי בלי לצייר כל אלמנט ידנית מאפס.

  • גרפיקה למשחקי תפקידים

    יצירת חפצים, דמויות ורמזים חזותיים שנראים כמו מסמכים עתיקים מהמאה הקודמת.

  • מיתוג פרויקטים מיסטיים

    עיצוב עטיפות ותוכן גרפי שדורשים קו איורי שמזכיר דפוס ידני קלאסי.

איפה זה נופל

זהו כלי שמייצר אך ורק דבר אחד: איורי טארוט בסגנון המדויק של שנת 1920. הוא לא מתאים לתמונות פוטו-ריאליסטיות או לסגנונות גרפיים מודרניים, וללא שימוש במחרוזת הטריגר המפורשת הוא עלול להתמוסס לתוך התוצרים הרגילים של מודל הבסיס. בנוסף, כל המגבלות וההטיות של פלוקס עצמו עדיין קיימות כאן ברקע.

שאלות
נפוצות

איך גורמים למודל לייצר את הסגנון הרצוי?

חובה לכלול בתוך הפרומפט את הטקסט in the style of TOK a trtcrd tarot style. המילים האלו משמשות כטריגר שלמד המודל כדי להפעיל את משקלי הטארוט על התמונה שנוצרת.

האם אפשר להריץ את המודל הזה לבד בלי מודלים נוספים?

לא. מדובר בקובץ LoRA קטן שאינו מתפקד עצמאית. חייבים לטעון ברקע את מודל הבסיס השלם של פלוקס כדי שיהיה על מה להרכיב את השכבה הזו.

איך מריצים

טעינת המשקלים נעשית בספריית diffusers הסטנדרטית בפייתון, בקובץ safetensors יחיד שמתלבש מעל מודל הבסיס. זה דורש להחזיק בזיכרון את FLUX.1 dev המלא ברמת דיוק bfloat16, מה שמחייב מעבד גרפי חזק עם נפח VRAM משמעותי כדי להריץ את הצינור מקומית בלי לקרוס.

אם אין לכם חומרה ייעודית כזו בענן או בתחנת עבודה מקומית, עדיף להריץ את השכבה דרך ספקי API חיצוניים שתומכים בהרכבת משקלי LoRA על מודלים של פלוקס, במקום לשלם על שרת כבד רק בשביל משקל נוצה של מאה ושבעים מגה.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("multimodalart/flux-tarot-v1")
img = pipe("a photo").images[0]

הרישיון

הרישיון מוגדר כ־other, כלומר אין רישיון קוד פתוח סטנדרטי בכרטיס. הנתונים שעליהם אומן המודל הגיעו מנחלת הכלל, אך המודל עצמו נשען על FLUX.1 dev שאינו מיועד לשימוש מסחרי חופשי, כך שלפני שילוב במוצר מסחרי צריך לבדוק היטב את תנאי המקור של בלאק פורסט לאבס.

הרישיון המלא בעמוד המודל ↗