GPT
E

edit-video-by-editing-text

רץ בדפדפן

radamesרישיון לא דווח2022-05-05

  • gradio

הכלי חותך קטעי וידאו על בסיס מחיקת מילים מתוך התמלול שלהם. הוא מתאים למי שרוצה לערוך דיבור מוקלט בלי להסתבך עם ציר זמן בתוכנת עריכה.

  • הורדות בחודש
  • 272לייקים

מה זה

אתם מעלים קובץ וידאו, מקבלים את התמלול שלו בתיבת טקסט, ומוחקים ממנו את המשפטים שאתם לא רוצים. משם הקוד מחשב את ההבדלים בעזרת difflib, גוזר את הווידאו עם ffmpeg לפי חותמות הזמן, ומחזיר קובץ וידאו ערוך לצד תצוגה שמדגישה מה נחתך.

מאחורי הקלעים רץ המודל facebook/wav2vec2-large-960h לתמלול האודיו, כשיש בקוד גם הכנה למודלים נוספים מאותה משפחה של פייסבוק. הממשק כולל דוגמאות מובנות מראש של קובצי וידאו עם קובצי json תואמים כדי שאפשר יהיה לבדוק את החיתוך מיד.

מתאים ל

  • עריכת ראיונות באנגלית

    מחיקת שגיאות דיבור ומשפטים מיותרים מתוך דיאלוג מוקלט ישירות מטקסט התמלול.

  • קיצור הרצאות

    הורדת פסקאות שלמות מהקלטת וידאו על ידי סימון ומחיקה של המילים בטקסט.

  • ניקוי קטעי דיבור

    יצירת גרסה מהודקת של דיבור מול מצלמה בלי לפתוח תוכנת עריכת וידאו כבדה.

איפה זה נופל

הבעיה המרכזית היא שהחלל נמצא במצב שגיאת ריצה ולא עובד כרגע בכלל. מעבר לזה, המודל אומן על אנגלית בלבד, כך שאין מה לנסות להעלות סרטונים בעברית. הדיוק של החיתוך מוגבל לחותמות הזמן של המילים שהמודל זיהה, ואם התמלול הראשוני שגוי, העריכה תתפספס.

שאלות
נפוצות

האם הכלי עובד כרגע?

לא. הדף מדווח על שגיאת ריצה כי הוא מוגדר על מעבד רגיל ומנסה לטעון מודל לחומרת גרפיקה שלא קיימת שם.

האם אפשר לערוך וידאו בעברית?

לא. מודל התמלול wav2vec2-large-960h אומן על קובצי אודיו באנגלית בלבד ולא יזהה מילים בעברית.

האם השימוש עולה כסף?

לא, הגישה לדף פתוחה בחינם. עם זאת, כדי להשתמש בו בפועל תצטרכו לשכפל אותו ולהפעיל על חומרה תואמת.

אפשר להריץ את זה על המחשב?

כן. אפשר לקחת את הקוד מ־app.py, להתקין את הספריות הנדרשות כמו transformers ו־ffmpeg, ולהריץ מקומית עם מעבד גרפי מתאים.

איך משתמשים

טוענים וידאו או בוחרים דוגמה, לוחצים על Transcribe Audio כדי לייצר תמלול, עורכים את הטקסט בתיבה ולוחצים Cut to video. החומרה שמוגדרת להרצה היא cpu-basic פשוט, בזמן שהקוד מנסה להעביר את המודל ל־cuda, מה שמסביר למה כרגע יש שגיאת ריצה והדף לא יעבוד בדפדפן בלי תיקון.

הרישיון

הרישיון לא דווח בעמוד. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד, וכל עוד לא צוינו תנאי שימוש, עדיף לא להעלות חומרים רגישים או פרטיים לשרת הציבורי.

הרישיון המלא ב־Hugging Face ↗