חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
R

rudalle

רץ בדפדפן

multimodalartmit2022-04-21

  • gradio

מייצרים תמונות מטקסט באמצעות מודל ruDALLE עם בחירת יחסי גובה-רוחב שונים. מתאים למי שרוצה לבדוק יצירת תמונות בסגנונות כמו סוריאליזם, ריאליזם או אימוג'י.

  • —הורדות בחודש
  • 47לייקים

מה זה

אתם מקלידים תיאור טקסטואלי חופשי, בוחרים יחס תצוגה מבין ריבוע, אופקי או אנכי, ובוחרים סגנון מודל מתוך שלוש אפשרויות: Surrealism, Realism או Emoji. כברירת מחדל מוזן התיאור an amusement park in mars. הפלט הוא תמונה בודדת שנוצרת לפי ההגדרות, יחד עם תיבת טקסט שמציגה הודעות שגיאה אם משהו משתבש.

מאחורי הקלעים רץ הקוד של ruDALLE עם מימוש ליחסי תצוגה משתנים של אלכס שוננקוב, לצד אזכור של מודל latent diffusion בקוד. המערכת כוללת רכיב תרגום אוטומטי של גוגל, כך שאם אתם כותבים באנגלית או בשפה שאינה רוסית, הטקסט מתורגם קודם לרוסית לפני שהוא מועבר למודל היצירה.

מתאים ל

  • בדיקת סגנון סוריאליסטי

    מזינים תיאור של מראות דמיוניים ובוחרים במודל Surrealism כדי לבחון תוצאות לא שגרתיות.

  • יצירת גרפיקה לא שגרתית

    מגדירים יחס אופקי או אנכי עם סגנון Emoji ליצירת דמויות ואייקונים מותאמים אישית.

  • בחינת קוד היסטורי

    בוחנים את קוד המקור של היישום כדי ללמוד כיצד שילבו בעבר תרגום אוטומטי עם ruDALLE.

איפה זה נופל

הבעיה המרכזית היא שהיישום שבור לחלוטין כרגע ומציג BUILD ERROR, כך שאי אפשר להריץ אותו בכלל ברשת. מעבר לזה, המודל מתבסס על תרגום אוטומטי לרוסית של מה שאתם כותבים, מה שעלול לעוות את הכוונה המקורית של הפרומפט בלי שתדעו. אפשרויות מתקדמות כמו שינוי מספר הצעדים או כמות התמונות מנוטרלות בקוד.

שאלות
נפוצות

האם היישום עובד עכשיו בדפדפן?

לא. היישום מוגדר במצב BUILD ERROR ולכן לא ניתן להריץ אותו ישירות באתר. תצטרכו להוריד את הקוד, לתקן את התלויות ולהריץ אותו באופן עצמאי.

האם אפשר להקליד פרומפט בעברית?

הקוד משתמש במתרגם של גוגל כדי להמיר כל שפה שאינה רוסית לרוסית. עברית עשויה לעבור תרגום כזה, אך דיוק הפרומפט ייפגע בתהליך ועדיף להזין אנגלית או רוסית ישירות.

כמה עולה להשתמש בכלי?

השימוש בקוד הוא חינמי לחלוטין ומבוסס על רישיון קוד פתוח. גם הגישה לממשק באתר אינה כרוכה בתשלום כשהוא עובד.

האם ניתן להריץ את זה על המחשב האישי?

כן, הקוד זמין תחת רישיון MIT. עם זאת, תצטרכו כרטיס מסך עם זיכרון מספק כדי להריץ את המודלים של ruDALLE באופן מקומי.

איך משתמשים

לוחצים על כפתור השליחה בממשק לאחר הזנת הטקסט ובחירת הפרמטרים. כרגע לא תגיעו לשלב הזה דרך הדפדפן, כי העמוד נמצא במצב של שגיאת בנייה ולא נטען לפעולה. אם הממשק היה פעיל על חומרת t4-small שהוקצתה לו, העיבוד היה לוקח זמן מורגש בכל ריצה, במיוחד בגלל שילוב התרגום ויצירת התמונה.

הרישיון

הפרויקט מפורסם תחת רישיון MIT. הרישיון מאפשר שימוש חופשי בקוד, כולל עריכה והפצה מסחרית או פרטית, בכפוף לשמירה על הקרדיט המקורי.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗