text-to-video

מה זה

למרות השם המטעה שמדבר על יצירת וידאו, הקוד בפועל לא מייצר שום פריים של תמונה. מזינים לתוכו טקסט רגיל בתיבה ייעודית, בוחרים קול מתוך רשימת הקולות הזמינים, ומקבלים שני קבצים להורדה: קובץ אודיו בפורמט שמע וקובץ כתוביות מסוג SRT.

מאחורי הקלעים רצה ספריית edge tts שממירה את הטקסט לדיבור, יחד עם שימוש בסיסי בספריית moviepy לטיפול בקובצי קול. הממשק מאפשר לכוונן את קצב הדיבור באחוזים בין מינוס חמישים לפלוס חמישים, לשנות את גובה הצליל בהרץ, ולקבוע כמה שורות יופיעו בכל מקטע של קובץ הכתוביות, בין שורה אחת לחמש. אין כאן מודל שמייצר אנימציה או סרטונים, אלא רק עיבוד קולי ויצירת תזמונים לטקסט.

מתאים ל

• הפקת קריינות

  יצירת קובץ קול מותאם אישית מתוך טקסט כתוב באמצעות שינוי קצב וגובה צליל.

• יצירת כתוביות

  הפקת קובץ כתוביות מסוג SRT עם חלוקה מוגדרת של שורות במקביל להקראה.

• הכנת חומרים לעריכה

  הורדת שמע ותרגום מסונכרן יחד כדי לשלב אותם עצמאית בתוכנת עריכת וידאו נפרדת.

איפה זה נופל

הבעיה המרכזית והמיידית היא שהיישום פשוט תקוע כרגע על שגיאת ריצה ולא עובד כלל בעמוד שלו. מעבר לכך, השם טקסט לוידאו מטעה לחלוטין. אם אתם מצפים לקבל קובץ MP4 או סרטון מוכן, לא תמצאו את זה כאן. היישום לא תומך בהזנת קלט ריק, מחייב בחירת קול ידנית, ולא יפיק כתוביות אם מחוון השורות יוגדר על אפס. כדאי לבדוק טוב אם הקולות הנתמכים כוללים עברית תקינה לפני שמנסים להסתמך עליו.

איך משתמשים

כרגע אי אפשר להריץ את היישום ישירות בדפדפן מפני שהוא נמצא במצב של שגיאת ריצה. אם וכאשר יתקנו אותו, השימוש בנוי על עבודה במסך אחד פשוט. מקלידים את הטקסט, בוחרים קול מהתפריט, מזיזים את המחוונים לפי הצורך ולוחצים על הכפתור הראשי שיוצר את האודיו והכתוביות. השרת מוגדר על חומרת מעבד בסיסית, מה שמספיק בהחלט לעיבוד קול כזה ולא דורש מאיץ גרפי, אבל מחייב שהקוד עצמו יעלה בלי לקרוס.

הרישיון

הקוד מפורסם תחת רישיון gpl-2.0. מדובר ברישיון קוד פתוח שמחייב אתכם לשחרר כל נגזרת שלו תחת אותו רישיון אם אתם מפיצים את התוכנה הלאה. השימוש בשירותי ההקראה החיצוניים כפוף לתנאים של ספק הקולות עצמו.

הרישיון המלא ב־Hugging Face ↗