OutofLipSync
רץ בדפדפןalexnasaרישיון לא דווח2025-12-11
מעלים קטע וידאו או קישור מטיקטוק, והוא מתורגם לאנגלית עם דיבוב ותנועות שפתיים מותאמות. מתאים למי שרוצה להנגיש סרטונים קצרים לקהל בינלאומי בלי לערוך ידנית.
- —הורדות בחודש
- 62לייקים
מה זה
מזינים קובץ וידאו מקומי או מדביקים כתובת של סרטון מטיקטוק, ובוחרים את משך הזמן הרצוי בעזרת סליידר שנע בין 5 ל־120 שניות. בסיום התהליך מקבלים קובץ וידאו מתורגם לאנגלית, קובץ כתוביות מסוג SRT עם זיהוי דוברים, ורצועת שמע מבודדת.
מאחורי הקלעים פועלת שרשרת ארוכה של מודלים. Whisper בגודל medium מתמלל את הנאמר, pyannote מפריד בין הדוברים, ו־IndexTTS-2 מקריא את התרגום. בנוסף רצים מודלים לניקוי והשבחת שמע כמו TIGER-DnR ו־FlashSR. על התאמת תנועות השפתיים לקול החדש אחראי LatentSync של ByteDance.
מתאים ל
- תרגום קטעי טיקטוק
המרת סרטוני טיקטוק קצרים לאנגלית כדי לבדוק איך התוכן נשמע בשפה זרה.
- דיבוב וידאו עם שפתיים
יצירת גרסה מדובבת לסרטון קיים תוך שמירה על התאמה בין תנועת הפה לקול.
- חילוץ כתוביות עם דוברים
הורדת קובץ SRT מתורגם שמפריד בין כמה אנשים שמדברים בקטע הווידאו.
איפה זה נופל
התרגום מתבצע כרגע רק לאנגלית, כך שאי אפשר להשתמש בזה כדי לדבב סרטונים לעברית או לשפות אחרות. הליפסינק מבוסס על LatentSync ועלול לייצר עיוותים באזור הפה אם הזווית של הראש חדה מדי או כשהתאורה לקויה. בנוסף, הסליידר מוגבל לעד 120 שניות, כך שלא ניתן לתרגם סרטונים ארוכים, והסתמכות על הורדה ישירה מטיקטוק עלולה להיכשל אם הקישור אינו זמין או שהאתר חוסם את החיבור.
שאלות
נפוצות
האם השימוש עולה כסף?
השימוש חופשי ופתוח ישירות בדפדפן. אין צורך בהזנת אמצעי תשלום, אך המשאבים משותפים עם שאר המשתמשים ברשת.
מה קורה לקבצים שאני מעלה?
הקבצים מעובדים על גבי השרת הזמני לצורך יצירת התרגום והווידאו. הקוד כולל פונקציות שמנקות את המידע עם סיום הסשן, אך מדובר במרחב ציבורי ולכן עדיף לא להעלות סרטונים פרטיים.
כמה זמן לוקח לכל סרטון להתעבד?
זה תלוי באורך שנבחר בסליידר ובשאלה אם ביקשתם גם ליפסינק. תרגום בלבד לוקח פחות זמן, אבל שילוב של LatentSync עם שיפורי קול דורש עיבוד גרפי כבד ויכול לקחת כמה דקות.
האם אפשר להשתמש בזה לסרטונים ארוכים?
לא. הממשק חוסם עיבוד מעל 120 שניות באמצעות הסליידר המובנה.
איך משתמשים
מדביקים קישור לטיקטוק או מעלים וידאו, מגדירים את מספר השניות בסליידר, ולוחצים על אחד משני כפתורים: תרגום בלבד או תרגום יחד עם ליפסינק. המערכת רצה על חומרת zero-a10g שמקצה מעבד גרפי לפי דרישה. אין צורך בהתחברות כדי להתחיל לעבוד, אבל בגלל שהשרת משרת את כולם והתהליך מפעיל כמה מודלים כבדים ברצף, זמני ההמתנה עשויים להיות ממושכים אם יש עומס.
הרישיון
הרישיון של המרחב לא דווח. חלק מהמודלים שרצים בפנים, כמו LatentSync של ByteDance, מגיעים עם תנאי שימוש והגבלות משלהם. במצב שבו אין רישיון ברור, לא כדאי להשתמש בתוצרים עבור מטרות מסחריות.