HunyuanVideo-Foley — הדגמה

קוד פתוח

tencentother2025-08-25

gradio

הכלי מייצר אפקטים קוליים וסאונד ומסנכרן אותם ישירות לתוך קובץ וידאו. הוא מתאים ליוצרי תוכן, אנימטורים ועורכים שצריכים פסקול מותאם לסרטונים אילמים.

17.3 GBמשקל הקבצים
—הורדות בחודש
168לייקים

מה זה

אתם מעלים קובץ וידאו, מקלידים תיאור טקסטואלי שמסביר מה שומעים, ויכולים להוסיף גם הנחיות שליליות למה לא לכלול. הממשק מאפשר לקבוע כמה דגימות קול לייצר במקביל, בין אחת לשש, לצד שליטה במספר צעדי הריצה ורמת הציות להנחיה.

מאחורי הקלעים רץ שילוב של מודל וידאו לטקסט וסאונד יחד עם מפענח VAE ב־48kHz שאחראי על הפקת אודיו. הארכיטקטורה משתמשת ברכיב Synchformer כדי ליישר את גלי הקול בדיוק לפי התנועה בפריימים של הווידאו.

בעמוד מופיעות שמונה דוגמאות מוכנות של סרטונים ותוצאות קוליות. אפשר לטעון כל אחת מהן בלחיצה אחת כדי לבדוק איך המודל מתמודד עם תנועות וסצנות שונות לפני שמעלים קובץ פרטי.

מתאים ל

הוספת אפקטים לסרטוני רשת
העלאת סרטונים קצרים ללא סאונד והפקת אפקטים מותאמים של תנועה, מכות, או רעשי רקע ישירות לקובץ.
פסקול ראשוני לאנימציה
הצמדת צלילים לקטעי תלת-ממד או איור כדי לבדוק קצב ותזמון תנועה לפני עריכת סאונד מקצועית.
הדמיית צליל למשחקים
יצירת דגימות אודיו מסונכרנות מתוך לכידות מסך של מנועי משחק ללא צורך בהקלטות שטח ידניות.

איפה זה נופל

המעבד בענן מחזיק מגבלות זמן ריצה קשיחות, וסרטונים ארוכים מדי או בקשות מרובות דגימות עלולים להיחתך באמצע. בנוסף, חומרי הנייר מתמקדים בעיקר באפקטים קוליים ובסנכרון תנועות רקע, כך שלא כדאי לבנות על הכלי להפקת דיאלוגים מורכבים בעברית או דיבוב אנושי מדויק.

שאלות
נפוצות

האם השימוש בממשק הזה עולה כסף?

לא, הגישה בדפדפן פתוחה לגמרי ללא תשלום. כל עוד המשאבים בענן זמינים, אפשר להעלות קבצים ולהפיק סאונד ללא כרטיס אשראי.

כמה זמן לוקח לייצר אודיו לווידאו?

משך העבודה תלוי באורך הווידאו ובמספר הדגימות שבחרתם לייצר. כרטיס המסך A10G דורש לרוב בין עשרות שניות לדקות בודדות, בפרט אם המכונה התחילה מהפעלה קרה.

האם אפשר להריץ את הכלי על המחשב שלי?

כן, הקוד והמשקלים פתוחים להורדה ממאגרי הגיטהאב והאגינג פייס של הפרויקט. תצטרכו מחשב מבוסס לינוקס עם סביבת פייתון 3.8 ומעלה ומעבד גרפי תומך קודה.

במה הדף הזה שונה מהקוד של המודל?

הדף מספק ממשק גרפי מוכן שמשלב את האודיו חזרה לתוך הווידאו בקובץ להורדה. המודל הגולמי בקוד דורש בניית סקריפטים והגדרת פרמטרים באופן ידני לחלוטין.

איך מריצים

טוענים וידאו, כותבים תיאור קצר, ולוחצים על כפתור הייצור. הדף רץ על חומרת zero-a10g שמקצה כרטיס גרפי של אנבידיה לפי דרישה. זה אומר שאם המעבד הגרפי היה במצב שינה, תצטרכו להמתין שניות ארוכות עד שהוא יידלק וייטען. אין צורך בהרשמה או התחברות כדי להתחיל, אבל יצירה של מספר דגימות במקביל עם כמות צעדים גבוהה תאריך את זמן ההמתנה בגלל עומס החישוב.

pip install -U huggingface_hub
hf download tencent/HunyuanVideo-Foley

הקבצים

14 קבצים במאגר, 17.3 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הרישיון של המרחב והמודל מוגדר כלא דווח. המשמעות היא שאין הרשאה מפורשת לשימוש מסחרי בקבצי האודיו שנוצרים, וכל עוד היוצרים לא פרסמו תנאים ברורים, השימוש בחומרים לצרכים עסקיים נשאר על אחריותכם בלבד.

הרישיון המלא בעמוד המודל ↗