video-background-removal

מה זה

מעלים קובץ וידאו ובוחרים רקע חדש מתוך שלוש אפשרויות: צבע אחיד דרך דוגם צבעים, תמונה סטטית, או סרטון נוסף שירוץ מאחור עם אפשרות ללופ או להאטה. הממשק מציג תצוגה מקדימה שמתעדכנת תוך כדי עיבוד, ובסוף פולט קובץ וידאו מוגמר.

מאחורי הקלעים רץ המודל BiRefNet שמיועד לסגמנטציה של תמונות, לצד גרסה קלה שלו בשם BiRefNet_lite. הקוד מפרק את הווידאו לפריימים, מריץ את החיתוך במקביל באמצעות מספר תהליכים שניתן לקבוע בממשק, ומחבר מחדש את התוצאה יחד עם האודיו המקורי באמצעות moviepy.

מתאים ל

• יצירת מסך ירוק

  מחליפים את הרקע הקיים בצבע ירוק אחיד כדי לייצא קליפ נקי לתוכנת עריכה.

• החלפת רקע בסרטוני רשת

  שותלים תמונה או וידאו אווירה מאחורי אדם שמדבר למצלמה בלי ציוד צילום מיוחד.

• בדיקת חיתוך לקטעים קצרים

  בודקים את איכות ההפרדה של BiRefNet על קטע וידאו של כמה שניות לפני הטמעה בקוד.

איפה זה נופל

המגבלה המרכזית כתובה ישירות בממשק: בגלל השימוש בחומרת Zero GPU, הוא מסוגל לעבד רק סביב 200 פריימים בריצה אחת. סרטון באורך מלא ייכשל או ייעצר באמצע, ולכן חייבים לחתוך קטעים קצרים מאוד מראש. המודל עצמו גוזר תמונות בודדות ולא וידאו רציף, כך שעלולים להופיע ריצודים בין פריימים.

איך משתמשים

מעלים את הווידאו, בוחרים את סוג הרקע, ומגדירים אם להפעיל מצב מהיר עם הדגם הקל. אפשר לכוון את קצב הפריימים ואת מספר התהליכים הרצים במקביל, עד 32, ולוחצים על כפתור השינוי.

הקוד רץ על חומרת Zero A10G שמוקצית לפי דרישה. יש שעון שמודד את השניות בזמן אמת, אבל המשאבים מוגבלים לחלונות זמן קצרים.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמתיר שימוש חופשי, שינוי קוד והרצה מסחרית. הקבצים מועלים ישירות לשרת שמריץ את הקוד, ואין הצהרת פרטיות ייעודית לגבי שמירת התוכן בסיום הפעולה.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗