GPT
הוספת כלי
Q

Qwen-Image-Edit-InStyle

קוד פתוח

peteromalletapache-2.02025-08-29

  • diffusers
  • image
  • editing
  • lora
  • style-transfer

התאמת LoRA קטנה שמדייקת העברת סגנון מתמונת מקור בלי לגרור איתה פרטים מיותרים. אם QwenEdit הבסיסי ערבב לכם תוכן וסגנון, המשקלים האלה פותרים את הבעיה.

  • 154 MBמשקל הקבצים
  • 2,189הורדות בחודש
  • 94לייקים

מה זה

מדובר באימון LoRA על בסיס מודל העריכה QwenEdit, שמגיע כקובץ safetensors צנוע של 154 מגה בייט. מודל הבסיס אמנם תומך בהעברת סגנון, אבל נוטה להעתיק אלמנטים גרפיים ספציפיים מתמונת הרפרנס במקום לקלוט רק את השפה החזותית שלה. המפתח אימן את המשקלים על מאגר רפרנסים מתוך Midjourney כדי לחדד את ההפרדה בין תוכן לסגנון.

בפועל, הוא תופס טוב יותר ניואנסים עדינים ושומר על ציות להוראות הטקסט בלי שתצטרכו להילחם בזליגת פרטים מהמקור. הוא לא מודל עצמאי אלא שכבת התאמה, ולכן הוא מתאים למי שכבר משתמש בצינור העריכה של Qwen ורוצה תוצאות נקיות יותר בהעברת סגנון.

מתאים ל

  • החלת סגנון מותג על תמונה

    לקיחת שפה חזותית מגרפיקה קיימת והלבשתה על רעיון חדש בלי להעתיק עצמים מהמקור.

  • יצירת איורים לספר

    שמירה על קו איור אחיד על פני סצנות שונות לפי תמונת רפרנס בודדת.

  • עריכת תמונות מונחית טקסט

    הפקת וריאציות לסצנה קיימת באמצעות תבנית הפרומפט הייעודית של המודל.

איפה זה נופל

היוצר מודה בפירוש שהמודל מתקשה מול סגנונות אמנותיים מופשטים מדי או חריגים. בנוסף, עלולות לצוץ בעיות אנטומיה ביצירת דמויות, וקיימת התנגשות כשיש פרטים טכניים קשיחים בטקסט שסותרים את הסגנון שנלקח מתמונת המקור. אל תבנו עליו לפוסטרים טכניים מדויקים או לאמנות אוונגרדית קיצונית.

שאלות
נפוצות

האם אפשר להריץ את הקובץ הזה לבד בלי מודלים נוספים?

לא. מדובר במשקלי LoRA ששוקלים 154 מגה בייט, והם חייבים להיטען מעל מודל הבסיס Qwen-Image-Edit. תצטרכו להוריד ולהחזיק בזיכרון קודם כול את מודל הבסיס המלא.

למה התמונות שיוצאות לא תואמות לסגנון שביקשתי?

המודל מאומן להגיב לתבנית פרומפט ספציפית מאוד. חובה להתחיל את הטקסט במשפט Make an image in this style of ורק אחר כך להוסיף את תיאור התמונה.

איך מריצים

טוענים את צינור QwenImageEditPipeline מתוך ספריית diffusers עם טיפוס נתונים bfloat16 על כרטיס מסך, ואז מלבישים עליו את משקלי ה־LoRA באמצעות הפקודה load_lora_weights. קובץ המשקלים עצמו שוקל 154 מגה בייט בלבד, אבל מודל הבסיס הוא שקובע את צריכת הזיכרון של כרטיס המסך, כך שתצטרכו חומרה שיכולה להחזיק את QwenEdit במלואו.

בזמן ההרצה, הפרומפט דורש ניסוח מדויק מאוד כדי להפעיל את ההתאמה. היוצר ממליץ לפתוח תמיד במילים Make an image in this style of ולהמשיך בתיאור הסצנה שרוצים לייצר.

from diffusers import DiffusionPipeline

pipe = DiffusionPipeline.from_pretrained("peteromallet/Qwen-Image-Edit-InStyle")
img = pipe("a photo").images[0]

הקבצים

5 קבצים במאגר, 154 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הרישיון המדווח הוא apache-2.0. מותר להשתמש בו לצרכים מסחריים, לשנות את הקוד ולהפיץ אותו בתוך מוצר, כל עוד שומרים על הודעת הרישיון המקורית וכתב הוויתור. הוא חופשי לגמרי לשילוב במערכות ייצור.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗