חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
B

brightness-controlnet

רץ בדפדפן

latentcatרישיון לא דווח2023-04-18

  • gradio
  • jax-diffusers-event

העלאת תמונה מאפשרת לשלוט בבהירות של תמונה חדשה שנוצרת מטקסט. הממשק מתאים למי שרוצה להכווין מודל ציור לפי אזורי אור וצל קיימים.

  • —הורדות בחודש
  • 51לייקים

מה זה

אתם מעלים תמונת ייחוס ומקלידים תיאור טקסטואלי, יחד עם תיאור שלילי למה שלא תרצו לראות. מתחת למכסה המנוע רץ שילוב של Stable Diffusion v1.5 עם מודל ControlNet ייעודי לבהירות, שנעזר במדרג UniPC כדי להרכיב את התוצאה הסופית. התמונה שמתקבלת שומרת על חלוקת האור והצל של המקור, אבל בונה סצנה חדשה לפי ההנחיות שלכם.

הממשק כולל דוגמאות מובנות שנשמרו מראש כדי להראות איך קלט ויזואלי מכתיב את התאורה. בהגדרות המתקדמות אפשר לכוון את מספר צעדי הריצה, ממדי התמונה, מידת ההיצמדות לטקסט ואת מספר הסיד לקבלת תוצאות עקביות.

מתאים ל

  • הכתבת תאורה לסצנה

    יצירת ציור חדש שמקבל את מבנה הצללים והאור מתמונה קיימת, לפי תיאור כתוב.

  • התאמת אווירה לפי תבנית

    שימוש בתמונת שחור לבן כדי לכפות אזורים כהים ומוארים על גבי דמויות או נופים.

  • בדיקת המודל לפני הטמעה

    בחינת יכולות השליטה של משקולות הבהירות של המודל באמצעות דוגמאות מוכנות מראש.

איפה זה נופל

הבעיה המיידית היא שהעמוד שבור ולא מייצר שום דבר כרגע. מעבר לזה, המודל מתבסס על ארכיטקטורת גרסה 1.5 הישנה, שמתקשה בפרטים קטנים, בטקסט ובריאליזם מורכב בהשוואה למודלים מודרניים. השליטה בבהירות בלבד לא מכתיבה קומפוזיציה מלאה, והתוצאות עלולות להתפזר אם ההנחיה הכתובה מתנגשת חזק מדי עם מפת האור של הקובץ שהעליתם.

שאלות
נפוצות

האם השימוש בעמוד הזה עולה כסף?

הגישה לממשק היא ללא תשלום ואינה דורשת הרשמה. עם זאת, נכון לעכשיו הוא נמצא במצב תקלה ולא מבצע עיבודים. אם הוא יתוקן, תוכלו לנסות אותו ישירות בדפדפן בלי לשלם.

כמה זמן לוקח לקבל תמונה?

כרגע היישום אינו מייצר תמונות בגלל שגיאת ריצה. כשהוא מחובר ופועל על כרטיס המסך מסוג T4 שהוקצה לו, פעולה כזו לוקחת בדרך כלל בין עשר לעשרים שניות. הדוגמאות השמורות מראש נטענות מיד כי הן נשמרו בזיכרון.

אפשר להוריד ולהריץ את הקוד באופן עצמאי?

הקוד פתוח לעיון ומבוסס על ספריות מוכרות כמו diffusers ומשקולות שזמינות להורדה. תצטרכו מחשב עם כרטיס מסך מתאים והתקנה של פייתון כדי להריץ את הצינור הזה אצלכם. שימו לב שהעמוד לא מציין רישיון רשמי, מה שמגביל שימוש מסחרי.

מה קורה לקבצים שאני מעלה לשם?

התמונות נשלחות לשרת שמריץ את הדמו לצורך הפקת הפלט. מכיוון שאין כאן התחייבות לפרטיות או רישיון מסודר, מומלץ לא להעלות תמונות אישיות או מידע רגיש. עדיף להשתמש רק בתמונות בדיקה ציבוריות.

איך משתמשים

בפועל, כרגע אי אפשר להריץ את ההדגמה הזו בדפדפן כי היא מדווחת על שגיאת זמן ריצה וקורסת. כשהיא עבדה, העליתם קובץ, כתבתם הנחיה ולחצתם על כפתור השליחה. החומרה שהוגדרה לה היא מאיץ מסוג T4 קטן, כך שגם אם היא תחזור לפעול, יצירת תמונה תיקח כמה עשרות שניות לכל ניסיון.

הרישיון

היוצר לא הגדיר רישיון לפרויקט הזה. במצב כזה אין הרשאה ברורה לשימוש מסחרי בקוד או בפלט, והזכויות נשארות מעורפלות. הקבצים שאתם מעלים עוברים דרך השרת שמארח את היישום, ולכן עדיף לא להעלות חומרים פרטיים.

הרישיון המלא ב־Hugging Face ↗