patrickvonplaten/instruct-pix2pix

מה זה

מעלים תמונה ללוח הבקרה וכותבים הוראה קצרה באנגלית שמסבירה מה לשנות, כמו החלפת רקע או הוספת פרטים. בצד השני מקבלים תמונה חדשה ששומרת על המבנה המקורי אבל מכניסה את השינוי המבוקש.

מאחורי הקלעים הקוד טוען את המודל של timbrooks/instruct-pix2pix בעזרת ספריית diffusers עם מתזמן מסוג EulerAncestralDiscreteScheduler בדיוק של float16. הממשק מכיל גם דוגמאות מובנות מראש שהוטענו לתוך הזיכרון, יחד עם שליטה ידנית במידות הרוחב והגובה, כמות הצעדים, הנחיית הטקסט ועוצמת ההישענות על תמונת המקור.

מתאים ל

• עריכת תמונות מהירה

  שינוי אלמנטים נקודתיים בתצלום בעזרת פקודת טקסט פשוטה באנגלית.

• בדיקת פרמטרים למודל

  כוונון יחסי ההשפעה של הטקסט לעומת התמונה המקורית דרך סליידרים.

• בחינת תשתית diffusers

  מעבר על קוד המקור כדי לראות איך מריצים את המודל ישירות בפייתון.

איפה זה נופל

הבעיה המיידית היא סטטוס RUNTIME_ERROR שמשבית את השרת, כך שאי אפשר להריץ אותה כרגע ישירות בדפדפן. בנוסף, הקוד מסיר לגמרי את מנגנון ה־safety_checker, מה שאומר שאין סינון פלט. הממשק גם דורש כתיבה באנגלית בלבד ומסתמך על חומרה חלשה יחסית שתתקשה לתת זמני מענה מהירים ברזולוציות גבוהות.

איך משתמשים

גוררים תמונה לחלון הקלט, מקלידים פקודה ולוחצים על כפתור Generate. בעמוד יש אפשרויות לקבוע פרומפט שלילי, כמות תמונות בגלריה, מספר צעדי ריצה, גודל בסליידרים וערך סיד ספציפי. ההדגמה מוגדרת לרוץ על מאיץ t4-small ללא צורך בהרשמה, אבל כרגע היא במצב שגיאת ריצה ולא תבצע את העיבוד.

הרישיון

הפרויקט מפורסם תחת רישיון mit. הקוד פתוח לחלוטין לשימוש, שינוי והפצה, כולל שימוש מסחרי, כל עוד שומרים על הודעת זכויות היוצרים המקורית.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗