GPT
D

DiffIR2VR

רץ בדפדפן

Koi953215רישיון לא דווח2024-06-28

  • gradio
  • Upscaling
  • Restoring
  • Video-to-Video
  • Video-2-Video

הכלי מיועד לשחזור והגדלת רזולוציה של סרטוני וידאו באמצעות מודלי דיפוזיה. הוא פונה למי שרוצה לנקות רעשים מקליפים קצרים או לחדד פרטים בווידאו ישן.

  • הורדות בחודש
  • 93לייקים

מה זה

אתם מעלים קובץ וידאו ומקבלים גרסה משוחזרת וחדה יותר. הממשק מחולק לשתי לשוניות עבודה עיקריות, אחת מוקדשת להגדלת רזולוציה והשנייה לניקוי רעשים. בהגדרות המתקדמות אפשר לקבוע את יחס ההגדלה, מספר הפריימים לעיבוד, כמות צעדי הדיפוזיה, וכן להוסיף הנחיות טקסט חיוביות ושליליות כדי לכוון את התוצאה.

מאחורי הקלעים הקוד משלב מספר מודלים כבדים. הוא נשען על משקולות של מודל דיפוזיה בגרסה 2.1, לצד רשתות ייעודיות כמו BSRNet, SCUNet לטיפול ברעש וצבע, ו־GMFlow לחישוב תנועה אופטית בין פריימים. בממשק משובצות דוגמאות מוכנות של סרטוני חיות וכלי רכב, כמו אוטובוס, פיל, קואלה וכלב, שממחישות את ההבדל בין חומרי המקור לקבצים המעובדים.

מתאים ל

  • הגדלת חדות בווידאו

    העלאת קליפים ברזולוציה נמוכה והרצת מודל סופר-רזולוציה לחידוד פרטים.

  • ניקוי רעשים מקבצים

    הסרת גרעיניות ורעש דיגיטלי מפריימים של וידאו באמצעות לשונית הניקוי.

  • בחינת שחזור דיפוזי

    בדיקת השפעת הנחיות טקסט ומספר צעדים על שחזור סרטונים קצרים.

איפה זה נופל

החיסרון המרכזי והמיידי הוא שההדגמה שבורה ולא פועלת. מעבר לזה, ניסיון לעבד וידאו באמצעות מודלי דיפוזיה וזרימה אופטית על מעבד רגיל אינו מעשי לסרטונים ארוכים, ולכן הממשק מראש מגביל את העבודה למספר פריימים בודדים. הדוגמאות שמוצגות בעמוד חושבו מראש ולא משקפות את מה שניתן להפיק כרגע דרך האתר.

שאלות
נפוצות

האם אפשר להשתמש באפליקציה כרגע?

לא. העמוד מדווח על שגיאת בנייה, כך שהממשק אינו מגיב ולא ניתן לעבד בו קבצים חדשים עד שהיוצר יתקן את הקוד.

האם השירות כרוך בתשלום?

הגישה להדגמה באתר אינה דורשת תשלום או מנוי. עם זאת, התשתית מוגבלת למשאבי מעבד בסיסיים בלבד.

מה קורה לקבצים שאני מעלה?

הווידאו נשלח לשרת שעליו רץ הממשק לצורך העיבוד. היות שלא צוינו תנאי שימוש או מדיניות פרטיות, עדיף לא להעלות חומרים רגישים.

אפשר להריץ את המערכת על המחשב שלי?

הקוד והמודלים זמינים במאגר וכוללים הפניה למאמר המדעי. כדי להריץ אותם מקומית יש צורך בהתקנת הסביבה ובמחשב עם כרטיס מסך חזק.

איך משתמשים

במצב הנוכחי אי אפשר להריץ את העיבוד בדפדפן, כיוון שהאפליקציה נמצאת בשגיאת בנייה. במקור, התהליך כולל בחירת לשונית, העלאת קובץ וידאו, כיוונון אופציונלי של הפרמטרים ולחיצה על כפתור השחזור. המערכת מוגדרת על חומרת מעבד בסיסית בלבד ללא מאיץ גרפי, כך שגם כשהקוד יתוקן, עיבוד וידאו בעזרת מודלי דיפוזיה צפוי לקחת זמן רב מאוד ולא יספק מענה מיידי.

הרישיון

היוצר לא הגדיר רישיון שימוש במאגר. ללא רישיון מוצהר, ברירת המחדל המשפטית אינה מעניקה זכויות שימוש מסחריות בקוד, ולא ברור מה הסטטוס לגבי סרטונים שמעלים או מפיקים דרכו.

הרישיון המלא ב־Hugging Face ↗