חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
F

flash-sd3-taesd3

רץ בדפדפן

radamescc-by-nc-4.02024-06-19

  • gradio

הדגמה שמייצרת תמונות מטקסט בזמן אמת בעזרת גרסה מהירה של סטייבל דיפיוז'ן 3. היא מיועדת למי שרוצה לבדוק כמה מהר אפשר לחלץ תמונה ממודל כבד בלי לחכות לרינדור ארוך.

  • —הורדות בחודש
  • 36לייקים

מה זה

אתם מקלידים תיאור טקסטואלי ומקבלים תמונה שנוצרת במקום. הממשק כולל שדה טקסט פשוט, כפתור הרצה, ואפשרות לפתוח הגדרות מתקדמות שבהן שולטים בסיד ובבחירה אם להגריל אותו מחדש בכל ריצה. יש בממשק גם רשימת דוגמאות מוכנות שמשמשות קלט מהיר לבדיקה.

מאחורי הקלעים רץ המודל Stable Diffusion 3 Medium של stabilityai, אבל בשילוב שני רכיבים שנועדו לכווץ את זמני הריצה. הקוד משתמש ב־Flash Diffusion של jasperai באמצעות PeftModel ומתזמן ייעודי, לצד מפענח זעיר ומהיר בשם TAESD3 של madebyollin שמחליף את ה־VAE המקורי.

מתאים ל

  • בדיקת מהירות הרצה

    בחינה של שילוב Flash Diffusion ו־TAESD3 כדי לראות אם שווה לשלב אותם במערכות פרטיות.

  • יצירת סקיצות מהירות

    הפקת רעיונות ויזואליים מטקסט בלי להמתין למודלים כבדים שמחייבים עשרות צעדי דגימה.

  • השוואת איכות המפענח

    בדיקה מעשית של איכות התמונה המתקבלת מ־TAESD3 מול ה־VAE הרשמי של סטייבל דיפיוז'ן.

איפה זה נופל

כרגע הדף מדווח על תקלת ריצה, כך שאי אפשר להשתמש בו ישירות בדפדפן בלי לתקן את הסביבה או להריץ את הקוד בעצמכם. מעבר לזה, השימוש במפענח תמונות קל כמו TAESD3 ובמאיצים חוסך המון זמן חישוב, אבל פוגע ברמת הפירוט העדינה לעומת המודל המלא. ההדגמה גם לא כוללת אפשרויות שליטה מתקדמות כמו משקלים לשלילה או כוונון מדדי רזולוציה.

שאלות
נפוצות

האם זה עולה כסף?

הגישה לעמוד בהאגינג פייס פתוחה בלי תשלום. עם זאת, נכון לעכשיו הוא מציג שגיאת ריצה.

מה קורה עם הטקסט שאני מזין?

הטקסט נשלח לקוד ההדגמה שמריץ את המודל בדפדפן. אין כאן שמירה פנימית של נתונים, אך המידע עובר דרך שרתי השירות.

האם אפשר להריץ את זה מקומית?

כן. הקוד ב־app.py מפרט בדיוק אילו ספריות ומודלים מורידים, כולל המשקלים מ־Hugging Face, כך שניתן לשכפל אותו למחשב עם חומרה מתאימה.

במה זה שונה משימוש בסטייבל דיפיוז'ן 3 הרגיל?

ההדגמה משלבת שכבת זיקוק מהירה ומפענח זעיר במקום המקורי. זה מייצר פלט במהירות גבוהה יותר אך עלול להתפשר על פרטים קטנים באיכות התמונה.

איך משתמשים

לוחצים על שדה הטקסט, כותבים תיאור או בוחרים דוגמה מוכנה, ולוחצים על הכפתור. אפשר להשאיר את הסיד אקראי או לקבוע מספר ידני בהגדרות. החומרה שמוגדרת בדף היא מעבד רגיל, אבל הקוד כולל רכיבי GPU, כך שכל עוד המופע תקול אי אפשר למדוד את מהירות התגובה האמיתית.

הרישיון

הפרויקט מוגדר תחת רישיון cc-by-nc-4.0. המשמעות היא שהשימוש מוגבל למטרות לא מסחריות בלבד, כך שלא תוכלו לקחת את הקוד או את התוצרים שנוצרים בו ישירות לפעילות עסקית מניבה.

  • שינוי הקוד
  • חובת ייחוס
  • שימוש מסחרי: לא

הרישיון המלא ב־Hugging Face ↗