LTX-2-3

מה זה

אתם כותבים תיאור טקסטואלי, ויכולים להוסיף תמונת בסיס אם תרצו שהסרטון יתחיל ממנה. בממשק בוחרים את אורך הסרטון בין שנייה אחת לעשר שניות, ויש אפשרות להפעיל הרחבת פרומפט אוטומטית ולבחור במצב רזולוציה גבוהה. התוצאה היא קובץ וידאו עם רצועת אודיו מסונכרנת.

מאחורי הקלעים רץ LTX 2.3 בגרסה מזוקקת, שמבוססת על מודל של 22 מיליארד פרמטרים. הקוד משתמש בצינור עיבוד ייעודי שמריץ קוונטיזציה ומחלק את פעולת הקידוד למקטעים, במטרה להפיק וידאו ואודיו יחד בזמן קצר יחסית.

מתאים ל

• הנפשת תמונות סטילס

  מעלים תמונה ומוסיפים תיאור קצר כדי ליצור סרטון שמתחיל ממנה וכולל פס קול תואם.

• יצירת קליפים מטקסט

  מקלידים תיאור סצנה ומקבלים קטע וידאו עם אודיו באורך של עד עשר שניות.

• בדיקת מודל LTX 2.3

  בוחנים את היכולות והתנועה של הגרסה המזוקקת לפני שמורידים משקלים להתקנה מקומית.

איפה זה נופל

המעבד הגרפי שמריץ את ההדגמה מוגבל בזמן ריצה לכל משימה, כך שיצירת קליפים ארוכים או שימוש ברזולוציה מקסימלית עלולים להיעצר באמצע. בנוסף, מודל מזוקק מוותר לפעמים על דיוק בפרטים קטנים ובתנועות מורכבות לטובת מהירות, כך שאיכות הווידאו פחותה מזו של המודל המלא.

איך משתמשים

לוחצים על כפתור יצירת הווידאו וממתינים. השרת מקצה כרטיס גרפי מסוג A10G דרך מנגנון שיתוף משאבים, כך שאם יש עומס תצטרכו להמתין בתור לפני שהעיבוד מתחיל. בהגדרות המתקדמות אפשר לקבוע סיד ידני ולשנות את הממדים, כשברירת המחדל עומדת על 1536 על 1024 פיקסלים.

הרישיון

הרישיון לא דווח בעמוד של האפליקציה. המשמעות היא שאין אישור מפורש לשימוש מסחרי בווידאו שנוצר, וזכויות השימוש בתוכן ובקוד אינן מוגדרות בבירור.

הרישיון המלא ב־Hugging Face ↗