חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
K

KEEP-docker

רץ בדפדפן

fffiloniרישיון לא דווח2024-08-29

  • docker

מעלים סרטון וידאו ומקבלים שחזור פנים ברזולוציה גבוהה. היישום מיועד למי שרוצה לשפר חדות של תווי פנים בקטעי וידאו ישנים או מטושטשים.

  • —הורדות בחודש
  • 58לייקים

מה זה

אתם מעלים קובץ וידאו ומקבלים חזרה סרטון שבו תווי הפנים עברו חידוד והגדלת רזולוציה. הטכנולוגיה מאחורי הכלי מתבססת על שיטה בשם KEEP, שמשתמשת בעקרונות של סינון קלמן כדי להעביר ולשמר מאפייני פנים בין פריימים עוקבים בווידאו, במקום לטפל בכל תמונה בנפרד.

בממשק יש תיבת סימון ששואלת האם מדובר במידע סינתטי שבו הפנים כבר חתוכות ומיושרות מראש, או בווידאו רגיל מהעולם האמיתי. הדוגמאות המוכנות כוללות שמונה סרטונים, ארבעה מוגדרים כסינתטיים עם חיתוך מוכן וארבעה כסרטונים אמיתיים, שמאפשרים לבדוק איך השיטה מתמודדת עם שני המצבים.

מתאים ל

  • חידוד פנים בווידאו ישן

    מעלים קטע וידאו עם פנים מטושטשות ומקבלים שחזור תווי פנים ברזולוציה משופרת.

  • בדיקת וידאו חתוך מראש

    מסמנים את תיבת המידע הסינתטי כדי לבדוק ביצועים על פנים שכבר עברו חיתוך ויישור.

  • השוואת דוגמאות מוכנות

    מריצים את דוגמאות הבדיקה שמגיעות בממשק כדי לראות את איכות השחזור בסרטונים אמיתיים.

איפה זה נופל

הבעיה המרכזית כרגע היא טכנית לחלוטין, הדף מדווח על שגיאת ריצה ולכן אי אפשר להריץ עליו שום דבר בפועל. מעבר לזה, הכלי מיועד אך ורק לחידוד פנים, ולא משפר איכות של שאר חלקי הפריים או הרקע. אם הווידאו שלכם לא כולל פנים חתוכות מראש, תצטרכו להסתמך על הזיהוי האוטומטי שלו, שבסרטונים אמיתיים ומורכבים עלול לפספס.

שאלות
נפוצות

האם הכלי עובד עכשיו בדפדפן?

לא, כרגע הדף מוגדר במצב שגיאת ריצה ולא מבצע עיבוד. אפשר לפתוח את הממשק, אבל לחיצה על שליחה לא תניב תוצאה עד שיתקנו את הבעיה בשרת.

כמה זה עולה?

הגישה לעמוד בהאגינג פייס פתוחה לגמרי בחינם, ואין צורך במנוי בתשלום. המשאבים מוקצים על גבי מאיץ L4 של הפלטפורמה ללא עלות מצד המשתמש.

האם אפשר להריץ את זה מקומית?

הקוד בנוי בתוך קונטיינר של דוקר וזמין בעמוד היישום. מי שמחזיק מחשב עם מעבד גרפי תומך ויודע לעבוד עם דוקר יכול למשוך את הקבצים ולהרים את הסביבה באופן עצמאי.

במה שונה מצב סרטון סינתטי מסרטון רגיל?

סרטון סינתטי מניח שהפנים כבר ממורכזות וחתוכות לגודל המתאים לניתוח. בסרטון רגיל האלגוריתם נדרש לאתר את הפנים בעצמו לפני תהליך שיפור הרזולוציה.

איך משתמשים

טוענים קובץ וידאו לנגן הקלט, מסמנים האם הפנים כבר מיושרות וחתוכות, ולוחצים על כפתור השליחה. בצד השני מופיע נגן לווידאו המעובד יחד עם חלונית שמציגה סטטוס או שגיאות ריצה. המערכת מוגדרת לרוץ על מעבד גרפי יחיד מסוג L4, אבל נכון לעכשיו היא נמצאת במצב שגיאת ריצה, כך שהיא פשוט לא מגיבה ולא תעבד את הקובץ.

הרישיון

הרישיון של היישום לא דווח במאגר. המשמעות היא שאין תנאי שימוש ברורים לגבי שימוש מסחרי בקוד או בתוצרים, ואין מידע לגבי מה נעשה עם קובצי הווידאו שאתם מעלים לשרת.

הרישיון המלא ב־Hugging Face ↗