NaRCan_demo
רץ בדפדפןKoi953215רישיון לא דווח2024-06-19
עריכת סרטונים קצרים בעזרת טקסט ומודלי תמונה, המיועדת למי שרוצה לבחון עריכת וידאו מבוססת ייצוג קנוני. הממשק מציג עיבוד מונחה על סרטוני הדגמה מוכנים מראש.
- —הורדות בחודש
- 84לייקים
מה זה
בממשק בוחרים סרטון מתוך רשימת דוגמאות מובנית, כותבים הנחיית טקסט, ומקבלים סרטון ערוך לצד תמונה קנונית מעובדת. במקום לעבד כל פריים בנפרד מאפס, השיטה נשענת על מודל פנימי של התאמת וידאו עם רשתות Siren והומוגרפיה, שממפה את התנועה לתמונה קנונית אחת.
העריכה עצמה מתבצעת על אותה תמונה באמצעות Stable Diffusion 1.5 בשילוב ControlNet, עם אפשרות לבחור בין זיהוי קווי מתאר מסוג Lineart לבין Canny. הדוגמאות המוכנות כוללות קטעים כמו דוב, כלב קורגי, כריש, גולש וסירה, כאשר לכל אחד מהם כבר חושבו מראש קובצי משקולות ופריימים מתאימים.
מתאים ל
- בדיקת עריכה קנונית
בחינה של השפעת תיאורי טקסט שונים על עריכת וידאו עקבית דרך סרטוני ההדגמה.
- השוואת מנגנוני בקרה
בדיקת ההבדל בין Lineart לבין Canny בשימור מבנה התמונה בזמן יצירת התוכן.
- הערכת עקביות תנועה
מעקב אחרי האופן שבו שינוי בתמונה הקנונית משתקף לאורך כל תנועת הסרטון.
איפה זה נופל
תיבת הווידאו מוגדרת כלא אינטראקטיבית, מה שאומר שאי אפשר להעלות סרטון משלכם ישירות דרך הדפדפן. המערכת מחייבת קובצי התאמה ומשקולות שחושבו מראש, ולכן ההדגמה מוגבלת אך ורק לשנים עשר סרטוני הדוגמה הקיימים בקוד. מי שמצפה להעלות חומר גלם עצמאי יגלה שהממשק פשוט חסום לזה.
שאלות
נפוצות
האם אפשר להעלות סרטון מהמחשב?
לא, תיבת הווידאו בממשק מוגדרת לקריאה בלבד. היישום נשען על קבצים פנימיים שהוכנו מראש עבור כל סרטון ברשימה, ולכן אפשר להריץ רק את הדוגמאות המובנות.
כמה זמן לוקח לעבד סרטון?
הזמן תלוי בהקצאת המשאבים של Hugging Face ברגע ההפעלה. מאחר שהיישום משתמש בספריית spaces, הוא דורש מעבד גרפי כדי לייצר תוצאה בזמן סביר, ועל מעבד רגיל הפעולה תהיה אטית במיוחד.
האם השירות כרוך בתשלום?
הפעלת הדף באתר Hugging Face אינה עולה כסף למשתמש הרגיל. עם זאת, המרחב נמצא כרגע במצב שינה וצריך להמתין להפעלתו מחדש.
במה ההדגמה הזו שונה מהרצת המודל המלא?
ההדגמה בדפדפן מדלגת על השלב הראשוני של ניתוח הווידאו והפקת התמונה הקנונית, ומציגה רק את שלב העריכה על קבצים מעובדים. כדי לעבוד עם סרטונים חדשים לגמרי, יש צורך להוריד את הקוד ולהריץ את כל תהליך ההתאמה באופן עצמאי.
איך משתמשים
לוחצים על אחד הסרטונים ברשימת הדוגמאות, מזינים תיאור טקסטואלי בשדה ההנחיה, ולוחצים על כפתור העריכה. תחת אפשרויות מתקדמות אפשר לשנות את סוג הבקרה, מספר הצעדים, סולם ההנחיה והגרעין האקראי. כרגע המרחב נמצא במצב שינה ומוגדר על חומרת מעבד בסיסית, כך שצריך להעיר אותו לפני שמתחילים, והרצה מלאה תדרוש הקצאת מעבד גרפי של Hugging Face Spaces.
הרישיון
הרישיון לא דווח בעמוד המאגר. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי או להפצה מחדש של הקוד והתוצרים. המודלים עצמם נשענים על תנאי השימוש של Stable Diffusion 1.5 ורכיבי ControlNet.