rudall-e
רץ בדפדפןanton-lרישיון לא דווח2022-03-02
הממשק מקבל תיאור תמונה באנגלית, מתרגם אותו לרוסית ומנסה לייצר תמונה דרך ruDALL-E. הוא מתאים למי שרוצה לבדוק את המודל הרוסי בלי לדעת את השפה.
- —הורדות בחודש
- 48לייקים
מה זה
אתם מקלידים תיאור קצר בתיבת טקסט באנגלית, למשל הדוגמה המובנית של טבע דומם עם ענבים ובקבוק יין. מאחורי הקלעים הקוד מריץ שרשרת של שתי פעולות נפרדות. תחילה מודל בשם facebook/wmt19-en-ru מתרגם את המשפט מאנגלית לרוסית, ומיד אחר כך הטקסט המתורגם מועבר למודל ruDALL-E שאמור לחולל ממנו תמונה.
התוצאה שהממשק מציג כוללת את התרגום בפורמט קוד ואת קובץ התמונה שנוצר. החיבור הזה נועד לעקוף את העובדה ש־ruDALL-E המקורי אומן ומבין פקודות רק ברוסית.
מתאים ל
- בדיקת שרשור מודלים
עיון בקוד כדי לראות איך מחברים מודל תרגום של פייסבוק עם מודל יצירת תמונות בממשק גרדיו.
- הפעלת ruDALL-E באנגלית
ניסיון תיאורטי להפיק תמונות ממודל רוסי באמצעות הזנת הנחיות בשפה האנגלית.
- הרצה מקומית על חומרה מתאימה
לקיחת הקוד ממאגר הגיט והפעלתו על מחשב עם כרטיס מסך עצמאי כדי לעקוף את השגיאה בענן.
איפה זה נופל
הבעיה המרכזית היא שהיישום פשוט לא עובד וקורס בעלייה. בנוסף, כל אי הדיוקים של תרגום מכונה נכנסים ישירות לתוך יצירת התמונה, כך שאם התרגום מפספס את הכוונה המקורית באנגלית, התמונה שתתקבל תהיה רחוקה ממה שביקשתם.
שאלות
נפוצות
האם האפליקציה עובדת כרגע באתר?
לא. הסטטוס שלה מוגדר כשגיאת ריצה והיא אינה זמינה לשימוש ישיר בדפדפן.
כמה זמן לוקח לייצר תמונה?
החומרה שהוגדרה היא מעבד בסיסי בלבד ללא מאיץ גרפי. במצב כזה, ריצת מודל תמונה כבד כמו ruDALL-E נמשכת דקות ארוכות לכל ניסיון.
האם אפשר להריץ את הממשק מקומית?
כן, הקוד הציבורי מבוסס פייתון וספריות מוכרות כמו transformers ו־gradio. תצטרכו להוריד את הקבצים ולהתקין את התלויות אצלכם, רצוי על מחשב עם מעבד גרפי של אנבידיה.
במה הממשק שונה מהמודל ruDALL-E הרגיל?
הוא מוסיף שלב תרגום אוטומטי בהתחלה. במקום שתצטרכו לכתוב תיאור ברוסית, מודל של פייסבוק מתרגם את האנגלית שלכם לפני הפקת התמונה.
איך משתמשים
כרגע אי אפשר להריץ את ההדגמה הזו בדפדפן מפני שהיא נמצאת במצב של שגיאת ריצה. מעבר לזה, המאגר מוגדר על חומרת מעבד בסיסית, כך שגם אם השרת היה למעלה, יצירת תמונה באמצעות מודלים כבדים כאלה ללא מעבד גרפי הייתה לוקחת זמן ממושך מאוד.
הרישיון
היוצר לא הגדיר רישיון לפרויקט הזה. המשמעות היא שאין הרשאה ברורה להשתמש בקוד, להעתיק אותו או להשתמש בתוצרים לצרכים מסחריים.