GPT
V

VIDEO-TRANSLATION-TRANSCRIPTION

רץ בדפדפן

artificialguybrרישיון לא דווח2023-10-09

  • gradio

מעלים קובץ וידאו ומקבלים תמלול, כתוביות מובנות ותרגום לשפות אחרות. הכלי מתאים למי שצריך להוציא טקסט מקובץ או להדביק עליו כתוביות בלי לערוך ידנית.

  • הורדות בחודש
  • 95לייקים

מה זה

אתם מעלים קובץ וידאו דרך הדפדפן, בוחרים אם לתרגם ולאיזו שפה, ומחליטים אם לסמן זיהוי דוברים. המערכת מחלצת את פס הקול בעזרת ffmpeg, מריצה עליו את WhisperX לתמלול ויישור זמנים מדויק, ומשתמשת ב־GoogleTranslator דרך deep-translator כדי לתרגם את הטקסט.

בסיום מקבלים וידאו חדש עם כתוביות מוטמעות ישירות בתמונה, קובץ SRT מוכן להורדה, ותיבת טקסט עם כל מה שנאמר. הממשק פשוט מאוד ואין בו דוגמאות מוכנות מראש, כך שחייבים להעלות קובץ משלכם כדי לראות תוצאות.

מתאים ל

  • יצירת קובץ כתוביות לסרטון

    מעלים וידאו ומורידים קובץ SRT מסונכרן להטמעה ביוטיוב או ברשתות חברתיות.

  • חילוץ תמלול טקסטואלי

    מוציאים את כל הדיבור מתוך הקובץ ישירות לתיבת טקסט לקריאה או עריכה.

  • תרגום וידאו עם כתוביות צרובות

    מתרגמים את שפת הדיבור לשפה זרה ומקבלים קובץ וידאו שמציג אותה על המסך.

איפה זה נופל

התרגום מתבצע דרך גוגל ולא דרך מודל שפה שמבין הקשר עמוק, כך שמשפטים מורכבים או סלנג עלולים לצאת עקומים. בנוסף, כתוביות נצרבות ישירות על גבי הווידאו דרך ffmpeg, מה שאומר שאי אפשר לשנות להן עיצוב, גופן או מיקום אחרי שהקובץ נוצר.

שאלות
נפוצות

האם השימוש בעמוד עולה כסף?

לא, השימוש דרך הדפדפן הוא בחינם לחלוטין. אין צורך להזין אמצעי תשלום כדי להעלות סרטון ולעבד אותו. כל עוד השרת פועל, אפשר להשתמש בו חופשי.

מה קורה עם קובצי הווידאו שמעלים?

הווידאו נשלח לשרת של ה־Space לצורך חילוץ האודיו והרצת המודלים. הקוד שומר קבצים זמניים לצורך פעולת התוכנה, אך אין הצהרת פרטיות רשמית. לכן עדיף לא להעלות חומרים רגישים או סודיים.

במה זה שונה משימוש במודל Whisper הרגיל?

היישום משתמש ב־WhisperX שנותן סנכרון זמנים מדויק יותר ברמת המילה, ומחבר אליו מודול של זיהוי דוברים. בנוסף הוא משלב את גוגל תרגום וסוגר את כל העבודה עם ffmpeg לקובץ וידאו גמור בלי שורת פקודה.

האם אפשר להריץ את הכלי על המחשב האישי?

כן, הקוד הציבורי מבוסס על ספריות פייתון פתוחות כמו whisperx, ffmpeg ו־gradio. עם זאת, להרצה מקומית חלקה תצטרכו כרטיס מסך של Nvidia והתקנה של כל התלויות ידנית.

איך משתמשים

גוררים וידאו לנגן, מסמנים אם רוצים תרגום או זיהוי דוברים, ולוחצים על הכפתור הראשי. השרת רץ על חומרת Zero A10G שמקצה כרטיס גרפי רק בזמן העבודה, כך שאם יש עומס ברשת תמתינו בתור קצר לפני שהעיבוד מתחיל. זמני ההמתנה בפועל תלויים באורך הסרטון שהעליתם.

הרישיון

היוצר לא ציין רישיון בקוד או בעמוד. המשמעות היא שזכויות היוצרים שמורות לו ואין אישור רשמי לשימוש מסחרי בקוד. הקבצים שאתם מעלים מעובדים בשרת זמני של הפלטפורמה.

הרישיון המלא ב־Hugging Face ↗