חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
T

TCD

רץ בדפדפן

h1tmit2024-02-29

  • gradio

הדגמה שמייצרת תמונות מטקסט בעזרת זיקוק עקביות מסלול על גבי מודל בסיס מוכר. היא פונה למי שרוצה לבדוק יצירת תמונות מהירה בלי להריץ קוד מקומי.

  • —הורדות בחודש
  • 56לייקים

מה זה

אתם מקלידים תיאור טקסטואלי באנגלית ומקבלים תמונה שנוצרת ישירות מההנחיה. הממשק כולל שדה טקסט, כפתור שליחה ואפשרות לבחור דוגמאות מובנות מתוך רשימה כדי לבחון תוצאות מוכנות מראש מבלי לחשוב על ניסוח.

מאחורי הקלעים רץ המודל stabilityai/stable-diffusion-xl-base-1.0 בשילוב עם שכבת משקלים ייעודית h1t/TCD-SDXL-LoRA ומנהל תזמון בשם TCDScheduler. השיטה הזו, Trajectory Consistency Distillation, נועדה לדחוס את תהליך הדיפוזיה ולאפשר הפקת תמונה איכותית במספר צעדים נמוך יחסית.

באפשרויות המתקדמות אפשר לקבוע את כמות צעדי החישוב, לשלוט בערך ה־seed כדי לקבל תוצאה שניתנת לשחזור, ולכוונן מחוון eta שמשפיע על אופי הדגימה והרעש בזמן הריצה.

מתאים ל

  • בדיקת איכות של TCD

    בחינת יכולת הזיקוק של המודל ביצירת תמונות מהירות מול המודל הבסיסי.

  • השוואת זמני דגימה

    הערכה של כמות הצעדים הנדרשת לקבלת פלט סביר עם רכיב ה־LoRA.

  • התנסות בהגדרות eta

    בדיקת ההשפעה של פרמטר הדגימה הייחודי על חדות התוצאה הסופית.

איפה זה נופל

החיסרון המרכזי והמיידי הוא שהממשק פשוט לא עובד כרגע בגלל תקלת תוכנה בעלייה. מעבר לכך, אין כאן אפשרות להעלות תמונות קיימות, אין תמיכה בעברית בשדות הפרומפט, וההדגמה מציגה רק פלט של תמונה בודדת בלי יכולות עריכה מתקדמות שמגיעות עם סביבות עבודה מלאות.

שאלות
נפוצות

האם השימוש בעמוד כרוך בתשלום?

לא. ההדגמה פתוחה לשימוש חופשי בדפדפן ואין צורך במנוי או בהזנת פרטי אשראי.

למה מופיעה שגיאה כשאני מנסה להשתמש?

האפליקציה נמצאת במצב של תקלת ריצה בקוד השרת. כל עוד המפתח לא מעדכן את הקבצים, השרת אינו מגיב לבקשות.

האם אפשר להריץ את זה על המחשב שלי?

כן. הקוד משתמש בספריית diffusers הסטנדרטית, ובאמצעות המשקלים הזמינים ברשת אפשר לטעון את הצינור הזה בסביבת פייתון מקומית עם כרטיס מסך מתאים.

איך משתמשים

לוחצים על Submit והבקשה נשלחת לעיבוד. ההדגמה מוגדרת לרוץ על חומרת zero-a10g שמקצה מעבד גרפי של אנבידיה לפי דרישה, מה שאמור לספק מענה מהיר. בפועל כרגע העמוד מדווח על שגיאת ריצה כללית, כך שאי אפשר לייצר תמונות חדשות ישירות בדפדפן עד שהמפתח יתקן את הבעיה.

הרישיון

הקוד מפורסם תחת רישיון MIT שמאפשר שימוש חופשי, העתקה ושינויים גם לפרויקטים מסחריים. עם זאת, התוצרים כפופים גם למגבלות הרישיון המקורי של המודל של סטביליטי.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗