חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
D

DeciDiffusion-v1-0 — הדגמה

קוד פתוח

Deciopenrail++2023-09-13

  • gradio

הכלי מייצר תמונות מטקסט ישירות בדפדפן על בסיס מודל ייעודי. הוא מתאים למי שרוצה לבדוק את יכולות היצירה של המודל בלי להתקין סביבת פיתוח מקומית.

  • 860Mפרמטרים
  • 4.1 GBמשקל הקבצים
  • —הורדות בחודש
  • 72לייקים

מה זה

הממשק מציע שדה פשוט להזנת תיאור טקסטואלי של התמונה שתרצו לקבל. מתחתיו יש תפריט הגדרות מתקדמות שמאפשר להזין הנחיה שלילית כדי להרחיק אלמנטים לא רצויים, לקבוע את כמות צעדי הדיגום בין 15 ל־50, לשנות את ה־seed מ־1 עד 100, ולכוונן את עוצמת ההצמדה להנחיה בסקאלה שבין 1 ל־15. בצד השני מופיעה התמונה המוגמרת בגובה קבוע.

מאחורי הקלעים הקוד טוען את המודל Deci/DeciDiffusion-v1-0 דרך ספריית diffusers, תוך שימוש בצינור עיבוד ייעודי ובארכיטקטורה של flexible unet ברישול נתונים של torch.float32. הממשק אינו מציג דוגמאות מוכנות מראש, כך שאתם נדרשים לכתוב את הפרומפט בעצמכם כדי לראות תוצאה.

מתאים ל

  • יצירת תמונות מטקסט

    כותבים תיאור באנגלית ומקבלים תמונה יחידה בהתאם להנחיות ולפרמטרים שבחרתם.

  • בדיקת ארכיטקטורת UNet

    מאפשר לבחון איך המימוש הגמיש של המודל מגיב לערכי סיד ודיגום שונים.

  • ניסוי בהנחיות שליליות

    בדיקת השפעת הסינון של עצמים או סגנונות על התוצאה הסופית.

איפה זה נופל

הבעיה המרכזית היא שהחלל מושהה ולא מייצר תמונות כרגע. מעבר לכך, הקוד רץ על מעבד רגיל ובדיוק float32, מה שמבטיח ריצה אטית במיוחד שלא משקפת את המהירות האמיתית של המודל בחומרה ייעודית. אין פה אפשרות להעלות תמונת מקור, והממשק מוגבל למספר צעדים מרבי של 50 בלבד.

שאלות
נפוצות

האם אפשר להשתמש באפליקציה כרגע?

לא, העמוד נמצא במצב מושהה. תצטרכו להעתיק את הקוד או להפעיל את החלל מחדש בסביבה שלכם כדי להריץ יצירה בפועל.

כמה זמן לוקח לייצר תמונה?

החומרה שמוגדרת לכלי היא מעבד בסיסי בלבד, ללא כרטיס מסך. יצירה במעבד כזה עם 30 צעדי דיגום יכולה להימשך דקות ארוכות עבור כל תמונה.

האם אפשר להריץ את המודל על המחשב שלי?

כן, הקוד משתמש בספריית diffusers סטנדרטית עם מזהה המודל Deci/DeciDiffusion-v1-0. אפשר להתקין את הספריות המתאימות בפייתון ולהריץ אותו מקומית אם יש לכם חומרה מתאימה.

האם צריך להירשם או לשלם כדי להשתמש?

הממשק עצמו חינמי לחלוטין ואינו דורש תשלום או הרשמה מיוחדת מעבר לגישה לדף. עם זאת, מכיוון שהוא מושהה, כדי להריץ אותו תצטרכו להפעיל משאבי מחשוב משלכם.

איך מריצים

בפועל כותבים תיאור, פותחים את ההגדרות המתקדמות אם רוצים לדייק את הפרמטרים, ולוחצים על Generate. כרגע האפליקציה נמצאת במצב מושהה (PAUSED), כך שלא ניתן להריץ אותה ישירות בלי להפעיל אותה מחדש. בנוסף, ההגדרה שלה מבוססת על מעבד בסיסי (cpu-basic) ללא מאיץ גרפי, מה שאומר שגם כשהיא פעילה, הפקת תמונה ב־30 צעדים תיקח זמן משמעותי.

pip install -U huggingface_hub
hf download Deci/DeciDiffusion-v1-0

הרישיון

הרישיון של החלל לא דווח בקוד או בהגדרות. במצב כזה אין אישור מפורש לשימוש מסחרי בתמונות שנוצרות, ולא ברור אילו זכויות שמורות למפתחים או למשתמש.

  • שימוש מסחרי
  • שינוי הקוד
  • מגבלות שימוש ברישיון

הרישיון המלא בעמוד המודל ↗