חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
S

StyleAligned_Transfer

רץ בדפדפן

fffiloniרישיון לא דווח2023-12-06

  • gradio
  • mcp-server

הכלי מעביר סגנון מתמונת מקור ליצירת תמונה חדשה לגמרי לפי תיאור טקסטואלי. הוא מיועד למי שרוצה לשמור על קו עיצובי אחיד בלי לאמן מודל מאפס.

  • —הורדות בחודש
  • 65לייקים

מה זה

מעלים תמונת מקור וכותבים שלושה שדות טקסט שונים: תיאור הסגנון כמו ציור מימי הביניים, תיאור מלא של מה שרואים בתמונת המקור, והפרומפט לתמונה החדשה שרוצים לייצר בפועל. בצד השני של המסך מקבלים גלריית תוצאות שמציגה את התוצר הסופי.

מאחורי הקלעים רץ שילוב של מספר מודלים וטכניקות. הבסיס נשען על SDXL יחד עם Stable Diffusion 2 Base, מודל עומק ControlNet Depth, הערכת עומק של אינטל ותיקון VAE של ollin. במקום רק להמציא משהו דומה, המערכת מבצעת היפוך ומיישרת את שכבות תשומת הלב מול תמונת הייחוס בעזרת מנגנון StyleAligned.

הממשק כולל דוגמאות מובנות לבדיקה מהירה, אך הן לא נשמרות מראש במטמון ומייצרות את הפלט מחדש ברגע שמפעילים אותן כדי להמחיש את השפעת הסגנון הנבחר.

מתאים ל

  • העתקת סגנון איור

    לקיחת איור קיים ויצירת דמות או חפץ חדש לחלוטין באותה שפת איור מדויקת.

  • שמירה על קו מיתוגי

    יצירת גרפיקות לאתר או לקמפיין שנשענות על הצבעוניות והמרקם של תמונת נושא בודדת.

  • ניסויי קונספט בעיצוב

    בדיקה מהירה של רעיונות ויזואליים על בסיס טכניקות ציור היסטוריות או סגנונות מוגדרים.

איפה זה נופל

התוצאה תלויה מאוד ביכולת לתאר במדויק גם את הסגנון וגם את תוכן התמונה המקורית. אם התיאור של תמונת המקור חלקי, היישור בין השכבות מזייף ומערבב אלמנטים לא רצויים. בנוסף, הדוגמאות בעמוד אינן שמורות במטמון, כך שכל בדיקה דורשת ריצה מלאה וממתינה למשאבי עיבוד פנויים.

שאלות
נפוצות

האם השימוש באפליקציה כרוך בתשלום?

האפליקציה פתוחה וזמינה לשימוש חופשי בדפדפן. היא רצה על גבי תשתית משותפת ואינה דורשת תשלום או הזנת פרטי אשראי. יחד עם זאת, זמינות השרת תלויה בעומס באותו רגע.

כמה זמן לוקח לייצר תמונה?

הזמן משתנה בהתאם לזמינות חומרת ה־A10G והתור הקיים. התהליך כולל היפוך תמונה וחישוב בשני מודלים כבדים, ולכן הוא לוקח לרוב בין חצי דקה לדקה שלמה. אם המעבד נרדם, ישנה עוד המתנה קצרה להפעלה שלו.

מה קורה לקבצים ולתמונות שמעלים?

התמונות נשלחות ישירות לזיכרון השרת שמריץ את הממשק כדי לעבד את הפיקסלים ולהפיק את הפלט. הן לא נשמרות במאגר ציבורי קבוע, אבל התעבורה עוברת בשרת מרוחק. עדיף לא להעלות חומרים רגישים או אישיים מדי.

האם אפשר להריץ את זה מקומית על המחשב?

הקוד פתוח ומבוסס על ספריות סטנדרטיות כמו diffusers ו־Gradio. אפשר להוריד אותו ולהריץ מקומית, אבל זה דורש כרטיס מסך חזק מאוד של אנבידיה עם זיכרון וידאו שמספיק ל־SDXL ולמודלי עזר במקביל. על מחשב רגיל בלי חומרה מתאימה זה לא יעבוד.

איך משתמשים

טוענים תמונה, ממלאים את שדות הטקסט של תיאור הסגנון ושני הפרומפטים, ולוחצים על Submit. התהליך מתבצע על חומרת Zero-A10G שמוקצית לפי דרישה. זה אומר שלעיתים יש המתנה קצרה לעליית המעבד הגרפי לפני שהחישוב הכבד של הפיכת התמונה והיצירה ב־SDXL מתחיל לרוץ עם סרגל ההתקדמות.

הרישיון

הרישיון של המרחב עצמו לא דווח בקוד או בתיעוד. המשמעות היא שאין הרשאה ברורה ומפורשת לשימוש מסחרי בקוד האפליקציה, אם כי המודלים הפנימיים כמו אלה של Stability AI כפופים לתנאי השימוש המקוריים שלהם.

הרישיון המלא ב־Hugging Face ↗