Whisper-youtube-crosslingual-subtitles

מה זה

מדביקים קישור לסרטון יוטיוב ציבורי או מעלים קובץ וידאו מקומי, ובוחרים את שפת המקור, שפת היעד וגרסת המודל שתרצו להריץ. המערכת מחזירה טבלאות של התמלול והתרגום, קובצי כתוביות בפורמט srt או vtt, ונגן וידאו שבו הכתוביות כבר מוטמעות ישירות על גבי התמונה.

מאחורי הקלעים רץ המימוש של whisper.cpp יחד עם מודל base כברירת מחדל, לצד שימוש בספריית pytube להורדת התוכן מיוטיוב וספריית pysrt לעיבוד הזמנים והטקסט. הממשק כולל דוגמאות מובנות שמאפשרות לבדוק את התהליך בלי להזין כתובת בעצמכם.

מתאים ל

• הפקת כתוביות מיוטיוב

  חילוץ תמלול מלא מסרטון פתוח והורדתו כקובץ srt או vtt מוכן לעריכה.

• תרגום סרטונים לשפות אחרות

  תרגום אוטומטי של הנאמר בווידאו לאנגלית או לשפות נוספות דרך הממשק.

• הטמעת כתוביות בווידאו

  יצירת קובץ וידאו חדש שבו הכתוביות מוצגות ישירות על גבי התמונה לצפייה.

איפה זה נופל

הבעיה המרכזית כרגע היא שהאפליקציה נמצאת במצב של שגיאת בנייה ולכן אינה עולה ואינה זמינה לשימוש ישיר בדפדפן. בנוסף, הקוד תומך רק בסרטוני יוטיוב שאינם פרטיים, וספריית ההורדה נוטה להישבר לעיתים קרובות מול שינויים באתר המקור. אי אפשר לבנות עליה כרגע בלי לתקן את סביבת ההרצה בעצמכם.

איך משתמשים

התהליך מחולק לארבעה שלבים ברורים עם כפתור לכל שלב: מורידים את הסרטון, מתמללים את האודיו, מתרגמים את הטקסט, ולבסוף מייצרים את הווידאו עם הכתוביות. אין צורך בהתחברות או ביצירת חשבון כדי להתחיל לעבוד.

הסביבה מוגדרת על חומרת מעבד בסיסית בלבד ללא מאיץ גרפי, כך שתמלול סרטונים ארוכים ייקח זמן ניכר וידרוש המתנה בסבלנות.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי, שינוי הקוד והפצה מסחרית או פרטית. לגבי קובצי הווידאו שמעלים או הקישורים שמזינים, זכויות היוצרים על התוכן המקורי נשארות כפופות לתנאי השימוש של יוטיוב ובעלי הזכויות.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗