text2live
רץ בדפדפןweizmannsciencemit2022-08-04
עריכת תמונות וסרטוני וידאו בעזרת הנחיות טקסט, על בסיס מחקר של מכון ויצמן. הממשק מיועד למי שרוצה לראות דוגמאות מוכנות לשינוי ממוקד של אובייקטים.
- —הורדות בחודש
- 86לייקים
מה זה
המחקר שמאחורי הפרויקט מציע עריכה מבוססת שכבות לתמונות ולסרטונים באמצעות טקסט. הרעיון הוא להגדיר מה לחפש בפריים המקורי, ולאיזה סגנון או עצם חדש רוצים להפוך אותו, בלי להרוס את שאר הרקע.
הממשק מחולק לשתי לשוניות, אחת לתמונות ואחת לווידאו. בדוגמאות לתמונות לוקחים תמונה של עוגה, מגדירים שמחפשים עוגה, ומקבלים גרסאות כמו עוגת אוראו, עוגת קרח, עוגת בריוש או עוגת תרד וטחב. בלשונית הווידאו מופיע סרטון של ג׳ירפה, שאותו הופכים לג׳ירפה מזכוכית צבעונית, ג׳ירפה עם מחמם צוואר או ג׳ירפה עם רעמה פרוותית צבעונית.
מתאים ל
- בחינת תוצאות המחקר
צפייה באיכות העריכה של שכבות וידאו ותמונה מתוך דוגמאות מוכנות של החוקרים.
- הבנת עריכה מונחית טקסט
המחשה של האופן שבו הנחיית טקסט מבודדת אובייקט ומשנה רק אותו.
- בדיקת היתכנות לפני הרצה
הערכת היכולות של המודל לפני שמורידים את הקוד ומריצים אותו עצמאית.
איפה זה נופל
זה לא כלי עבודה שמאפשר לכם להעלות קובץ משלכם ולקבל תוצאה. שדות הקלט בקוד מוגדרים במפורש כלא אינטראקטיביים, כך שמדובר בגלריית הדגמה סגורה בלבד. מי שרוצה לערוך סרטונים או תמונות חופשיות יצטרך לפנות לקוד המקור ולהריץ אותו על חומרה מתאימה עם כרטיס מסך.
שאלות
נפוצות
האם אפשר להעלות לכאן תמונה או סרטון משלי?
לא, הממשק אינו פתוח לקבצים חיצוניים. שדות ההזנה בקוד מוגדרים במצב קריאה בלבד. אתם יכולים רק להתרשם מקובצי הדוגמה שהוטמעו מראש בעמוד.
למה הממשק לא מגיב כרגע?
העמוד נמצא כעת במצב מושהה בהאגינג פייס. במצב כזה השרת כלל אינו פעיל, ולכן לא ניתן להריץ פעולות בממשק. כדי לבדוק אותו יש צורך להמתין להפעלתו מחדש או לשכפל את המרחב.
האם השימוש בעמוד כרוך בתשלום?
הצפייה בעמוד היא בחינם ואינה דורשת תשלום או מנוי. גם קוד המקור פתוח ומשוחרר תחת רישיון MIT חופשי. אם תרצו להריץ אותו בעצמכם על גבי שרת ייעודי, תצטרכו לשאת בעלויות החומרה שלכם.
האם אפשר להריץ את הכלי הזה באופן מקומי?
כן, מאחר שמדובר בקוד תחת רישיון MIT, אפשר להוריד את הפרויקט ולהריץ אותו במחשב שלכם. תצטרכו סביבת פייתון תואמת וכרטיס מסך מתאים כדי לעבד תמונות ווידאו. הממשק הנוכחי מציג רק תוצאות קבועות מראש.
איך משתמשים
כרגע אי אפשר להריץ כאן שום דבר חי כי המרחב במצב מושהה. גם כשהוא דלוק, הקוד מוגדר עם רכיבים חסומים לעריכה ומציג תוצאות מוכנות מראש. החומרה המוקצית היא מעבד בסיסי בלבד, שלא מיועד לעיבוד מודלים כבדים בזמן אמת.
הרישיון
הפרויקט מפורסם תחת רישיון MIT. הרישיון חופשי ומתיר שימוש, שינוי והפצה, כולל לצרכים מסחריים, בכפוף לשמירה על תנאי הרישיון המקוריים.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש