חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
A

ads-video-generator

רץ בדפדפן

jonathanjordan21mit2023-11-06

  • gradio

הכלי מייצר סרטוני פרסומת קצרים למוצרים על בסיס טקסט. הוא מתאים למי שרוצה להפיק הדגמות וידאו מהירות בלי לערוך חומרי גלם בעצמו.

  • —הורדות בחודש
  • 58לייקים

מה זה

אתם מקלידים את שם המוצר בשדה הטקסט ובוחרים ממדי וידאו מתוך תפריט הבחירה. הפלט כולל כתוביות פרסומיות שמוצגות בתיבת טקסט ייעודית, וקובץ וידאו מוגמר שמוצג ישירות בנגן המובנה.

מאחורי הקלעים רץ המודל flan-alpaca-large של declare-lab, בעוד גרסת ה־gpt4-xl הגדולה יותר נותרה מוערת בקוד ולא פעילה. הקוד משתמש ב־LangChain כדי לבנות שרשראות טקסט של כתוביות ותגיות, ונעזר באינטגרציה מול מאגר Pexels כדי לשלוף קטעי וידאו מתאימים ולהרכיב מהם את התוצר הסופי.

מתאים ל

  • סרטוני מוצר מהירים

    יצירת טיוטת וידאו ראשונית לרשתות חברתיות עבור מוצר צריכה כללי.

  • בדיקת רעיונות לכתוביות

    הפקת טקסטים שיווקיים ותגיות תואמות על בסיס שם המוצר בלבד.

  • בניית כלי אוטומציה

    שימוש בקוד המקור של LangChain ו־Pexels כבסיס לפיתוח מקומי משלכם.

איפה זה נופל

הבעיה המיידית היא שהחלל פשוט קורס ולא עובד כרגע בגרסה הציבורית שלו. בנוסף, הוא לא מייצר וידאו מקורי מאפס דרך בינה מלאכותית יוצרת, אלא מחבר קטעים מוכנים ממאגר Pexels לפי תגיות שהמודל מנחש. אם המוצר שלכם ייחודי או דורש הדגמה ספציפית, החיבור למאגר כללי יביא לתוצאות גנריות מאוד.

שאלות
נפוצות

האם הכלי עובד עכשיו בדפדפן?

לא. המופע באתר Hugging Face נמצא כרגע בסטטוס שגיאה (RUNTIME_ERROR), כך שהממשק לא מגיב לפעולות. כדי להשתמש בו צריך להוריד את הקוד ולהריץ אותו באופן עצמאי.

האם השימוש בו עולה כסף?

לא, הגישה לקוד ולממשק חופשית. עם זאת, אם תרצו להריץ אותו אצלכם, ייתכן שתצטרכו מפתח API למאגר הסרטונים של Pexels בהתאם להגדרות הקוד.

האם הוא מייצר וידאו יש מאין בעזרת מודל דיפוזיה?

לא. המודל של Flan-Alpaca מייצר רק את הטקסטים והתגיות. קטעי הווידאו עצמם נמשכים כחומרי גלם ממאגר הסרטונים של Pexels ומורכבים יחד לקובץ אחד.

אפשר להריץ את הפרויקט על המחשב האישי?

כן, הקוד פתוח תחת רישיון MIT ומשתמש בספריות מוכרות כמו Transformers ו־Gradio. תצטרכו להתקין את התלויות ולהוריד את המודל flan-alpaca-large כדי שהכל יעבוד.

איך משתמשים

בממשק מזינים את שם המוצר, מגדירים מידות ולוחצים על Submit. בפועל, כרגע אי אפשר להריץ את זה בדפדפן כי המופע נמצא במצב של שגיאת ריצה (RUNTIME_ERROR). הוא מוגדר על חומרת מעבד בסיסית (cpu-basic), כך שגם כשהוא עובד, פעולות של טעינת מודל שפה, שליפת וידאו והרכבת קובץ מדיה צפויות לקחת זמן מורגש.

הרישיון

הפרויקט מפורסם תחת רישיון MIT. הרישיון הזה מתיר שימוש חופשי לחלוטין בקוד, כולל עריכה, הפצה ושימוש מסחרי. לגבי הסרטונים שנוצרים, זכויות השימוש בהם כפופות לתנאי הרישיון של Pexels שממנו נמשכים קטעי הווידאו.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗