חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
I

imagic-stable-diffusion

רץ בדפדפן

fffiloniרישיון לא דווח2022-11-25

  • gradio

מעלים תמונה אחת, מתארים בטקסט את השינוי המבוקש ומקבלים גרסה ערוכה שלה. הממשק מיועד למי שרוצה לבדוק עריכת תמונות מבוססת טקסט בלי לכתוב סקריפטים.

  • —הורדות בחודש
  • 46לייקים

מה זה

התהליך מתחיל בהעלאת תמונת מקור וכתיבת הנחיית טקסט שמתארת את הפעולה או המצב החדש, למשל תנוחה שונה של החיה המצולמת. הקוד כולל שתי דוגמאות מובנות בהערות, כלב יושב וציפור שפורשת כנפיים, שממחישות את כוונת המפתח לשינויי תנועה עדינים.

מאחורי הקלעים רץ שילוב של Stable Diffusion v1.4 יחד עם מודל CLIP של OpenAI, בתוך מימוש קהילתי של שיטת Imagic. השיטה הזו מאמנת את שיבוץ הטקסט ואת המודל ישירות על התמונה הבודדת שלכם לפני הפקת התוצאה.

מתאים ל

  • שינוי תנוחה בתמונה

    לקיחת תמונה של חיה או חפץ ושינוי המצב שלהם, כמו פרישת כנפיים, לפי תיאור טקסטואלי.

  • בדיקת שיטת Imagic

    התנסות מעשית בכוונון עדין של מודל יצירה סביב תמונה בודדת בלי להרים סביבת פיתוח מקומית.

  • עריכת פרטים נקודתית

    ניסיון לשנות מאפיין ספציפי באובייקט קיים תוך שמירה על הרקע והקומפוזיציה המקורית.

איפה זה נופל

הבעיה המרכזית כרגע היא שהאפליקציה נמצאת במצב מושהה ולא פעילה ברשת. מעבר לזה, הדוגמאות בקוד נוטרלו, כך שאי אפשר להריץ בדיקה מוכנה בלחיצה אחת. שיטת אימון ישיר על תמונה אחת רגישה מאוד למספר הצעדים שתבחרו, עודף צעדים ישרוף את התמונה ומעט מדי פשוט יתעלם מהשינוי שביקשתם.

שאלות
נפוצות

האם אפשר להשתמש באפליקציה כרגע?

לא ישירות בדפדפן. המרחב נמצא כרגע במצב מושהה, ולכן הוא לא מקבל פקודות או מייצר תמונות עד שבעל החשבון יפעיל אותו מחדש.

כמה זמן לוקח לייצר תמונה?

התהליך כולל אימון מחדש של כמה מאות צעדים על חומרת T4 בינונית. זה לא עניין של שניות בודדות כמו יצירה רגילה, אלא דורש המתנה מורגשת בשלב האימון לפני שאפשר ללחוץ על הפקת התוצאה.

מה מיוחד בשיטה הזו לעומת סתם פרומפט רגיל?

במקום לנסות לתאר הכל מאפס, המודל לומד קודם את התמונה הספציפית שהעליתם. לאחר מכן הוא משלב את ההבנה החדשה הזו עם ההנחיה הכתובה כדי לשנות רק את מה שביקשתם.

איך משתמשים

טוענים קובץ, מכניסים טקסט וקובעים בסליידרים את צעדי האימון לטקסט ולמודל עצמו, עד אלף צעדים. העבודה מחולקת לשני כפתורים עוקבים, קודם לוחצים על אימון ומחכים להודעת סיום, ורק אז לוחצים על יצירת התמונה הערוכה. הריצה מוגדרת על כרטיס T4, שזה מעבד גרפי בסיסי למדי, כך שאימון מלא ייקח זמן ולא יסתיים בכמה שניות בודדות.

הרישיון

היוצר לא דיווח על רישיון שימוש במרחב הזה. המשמעות היא שאין הרשאה ברורה להשתמש בפלטים לצרכים מסחריים, וזכויות הקוד נשארות פתוחות לפרשנות משפטית, למרות ההסתמכות על רכיבי קוד פתוח מוכרים.

הרישיון המלא ב־Hugging Face ↗