חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
S

fffiloni/stable-diffusion-inpainting

רץ בדפדפן

fffiloniרישיון לא דווח2022-09-03

  • gradio

הכלי מיועד למי שרוצה לצייר מחדש חלקים מתוך תמונה קיימת בעזרת טקסט. מעלים תמונה, מוחקים אזור מסוים, ומקבלים מילוי מבוסס בינה מלאכותית ישירות בדפדפן.

  • —הורדות בחודש
  • 54לייקים

מה זה

התהליך פשוט מאוד מבחינת קלט ופלט. אתם מעלים תמונה בגודל של 512 על 512 פיקסלים, משתמשים בכלי המברשת המובנה כדי לסמן את החלק שאתם רוצים להחליף, ומקלידים תיאור טקסטואלי של מה שצריך להופיע שם. התוצאה מוצגת בגלריה של תמונות שנוצרו מחדש לפי ההוראות שלכם.

מאחורי הקלעים רץ המודל runwayml/stable-diffusion-inpainting דרך ספריית diffusers. הקוד כולל מסנן תכנים למבוגרים שמופעל כברירת מחדל, כך שאי אפשר לייצר תמונות שלא עוברות את הסינון הזה.

מתאים ל

  • החלפת אובייקט בתמונה

    צביעה על חפץ מסוים וכתיבת תיאור של חפץ אחר שיחליף אותו באותה נקודה.

  • תיקון פגמים בצילום

    סימון אזור פגום בתצלום של 512 פיקסלים ויצירת רקע חדש שמשתלב במקום.

  • בדיקת המודל על מעבד

    הבנה איך מודל אינפיינטינג מתפקד בסביבת חומרה חלשה ללא מעבד גרפי ייעודי.

איפה זה נופל

זה לא כלי לעבודה מהירה ובטח לא למידות תמונה חופשיות. אם תעלו תמונה שלא חתוכה בדיוק לריבוע של 512 על 512 פיקסלים, אתם מסתכנים בשגיאת זיכרון שתפיל את התהליך. החומרה החלשה הופכת כל ניסוי וטעייה לסיוט של עשר דקות המתנה. העובדה שהמרחב כרגע מושהה אומרת שאי אפשר להשתמש בו ישירות מבלי להעיר אותו או לשכפל לעצמכם.

שאלות
נפוצות

האם הכלי עובד בחינם?

השימוש במרחב עצמו אינו כרוך בתשלום, אך נכון לעכשיו הוא במצב מושהה. כדי להפעיל אותו תצטרכו להעיר אותו או לשכפל את הקוד לחשבון שלכם ולהגדיר טוקן אישי.

כמה זמן לוקח לייצר תמונה?

הרבה מאוד זמן ביחס לכלים מודרניים. בגלל שהקוד רץ על מעבד רגיל ולא על כרטיס מסך, כל תמונה לוקחת בין חמש לעשר דקות עבודה.

למה המערכת קורסת עם תמונות רגילות?

הקוד מוגבל במשאבי זיכרון ומחייב תמונות ריבועיות של 512 על 512 פיקסלים. העלאת תמונה גדולה או ברזולוציה שונה תוביל לקריסה עקב חוסר זיכרון.

האם אפשר להריץ את זה מקומית?

כן, הקוד מבוסס על ספריות פתוחות כמו diffusers ו־gradio. אם תורידו אותו למחשב עם כרטיס מסך מתאים, המודל יעבוד הרבה יותר מהר מאשר בהדגמה הזו.

איך משתמשים

לוחצים על אזור ההעלאה, משרבטים על האזור למחיקה, כותבים פרומפט ומריצים. כאן מגיעה הבעיה העיקרית: ההדגמה מוגדרת על מעבד בסיסי בלבד. המפתח מציין במפורש שזמן העיבוד לוקח בין חמש לעשר דקות לכל הרצה, ויש תור של gradio שמנהל את הבקשות, כך שצריך המון סבלנות. בנוסף, נכון לעכשיו המרחב עצמו נמצא במצב מושהה ולא פעיל.

הרישיון

לא דווח רישיון עבור המרחב הזה. כשאין רישיון מוגדר, אין לכם אישור רשמי להשתמש בקוד לפרויקטים מסחריים. תנאי השימוש בתמונות עצמן נגזרים ישירות מהרישיון של המודל המקורי של runwayml.

הרישיון המלא ב־Hugging Face ↗