HunyuanWorld-Voyager
קוד פתוחtencentother2025-08-27
הפיכת תמונה בודדת לסרטון עם תנועת מצלמה מוגדרת ועקביות תלת ממדית. הוא מייצר במקביל ענן נקודות, וידאו רגיל ומפת עומק.
- 80.2 GBמשקל הקבצים
- 141הורדות בחודש
- 609לייקים
מה זה
טנסנט שחררו כלי שלוקח תמונה אחת ומסלול מצלמה שבחרתם, ומייצר מתוכם סרטון ששומר על עקביות של סביבה תלת ממדית. בניגוד למודלי תמונה לווידאו רגילים שסתם מנחשים תנועה ומורחים את הרקע, כאן המודל מייצר במקביל גם וידאו RGB וגם וידאו עומק תואם, לצד רצף ענני נקודות.
המשמעות של הסינכרון הזה היא שאפשר לקחת את התוצרים ולבנות מהם שחזור תלת ממדי אמיתי של הסצנה. המודל מתמקד ביצירת עולמות שניתן לחקור אותם לאורך מסלול תנועה, ולא רק בהנפשה מקומית של אובייקט בתוך פריים סגור.
מתאים ל
- שחזור תלת ממדי מתמונה
יצירה מקבילה של וידאו ועומק מאפשרת להפיק מודל גיאומטרי ישירות מפריים בודד.
- סיור וירטואלי במסלול מוגדר
הגדרת מסלול מצלמה חופשי בתוך תמונת נוף או חלל לצורך סימולציה.
- יצירת דאטה לאימון ראייה
הפקת רצפי וידאו עם מפות עומק תואמות לצורכי מחקר ואימון מודלים תלת ממדיים.
איפה זה נופל
הכרטיס מציג את הרעיון הכללי אבל לא מספק נתוני ביצועים, זמני ריצה, או דרישות VRAM מדויקות. אין פירוט לגבי מה קורה כשהמצלמה מבצעת תנועות חדות מדי או כשמנסים לייצר סצנות מורכבות עם השתקפויות וחומרים שקופים. צריך לבדוק אותו ישירות על הדאטה שלכם כדי לראות אם העומק והעקביות מחזיקים מעמד בלי עיוותים.
שאלות
נפוצות
האם אפשר להריץ את המודל על מחשב אישי רגיל?
לא. הקבצים שוקלים מעל 80 גיגה בייט ומודל דיפוזיה כזה דורש כרטיס מסך מקצועי עם נפח זיכרון גדול מאוד, בדרך כלל שרת ענן ייעודי.
האם הוא תומך בעברית?
הכרטיס מציין תמיכה באנגלית ובסינית בלבד. אם יש ממשקי טקסט או הנחיות, לא כדאי לבנות על קלט בעברית ועדיף לתת תיאורים באנגלית.
מה היתרון שלו על פני מודל תמונה לווידאו רגיל?
הוא שומר על עקביות גיאומטרית ומייצר מפת עומק וענן נקודות במקביל לסרטון, מה שמאפשר לבצע שחזור תלת ממדי של הסצנה.
איך מריצים
המשקל הכולל של הקבצים מגיע ליותר מ־80 גיגה בייט, מה שאומר שצריך שרת ייעודי חזק מאוד עם כרטיס גרפי כבד כדי לטעון אותו לזיכרון. לא מריצים דברים כאלה על מחשב נייד או כרטיס ביתי פשוט.
הקוד דורש שימוש בספרייה הייעודית שלו, hunyuanworld-voyager. אם אתם רק בודקים את היכולות או צריכים כמה סרטונים בודדים לבדיקת היתכנות, עדיף לחפש נקודת קצה מנוהלת אם תהיה זמינה, במקום לשלם על שעות שרת יקרות רק בשביל להוריד ולהגדיר את הקבצים.
pip install -U huggingface_hub hf download tencent/HunyuanWorld-Voyager
הקבצים
37 קבצים במאגר, 80.2 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
- Voyager/transformers/mp_rank_00_model_states_context.pt31.3 GB
- Voyager/transformers/mp_rank_00_model_states.pt30.2 GB
- text_encoder_i2v/model-00003-of-00004.safetensors5.0 GB
- text_encoder_i2v/model-00001-of-00004.safetensors5.0 GB
- text_encoder_i2v/model-00002-of-00004.safetensors4.9 GB
- text_encoder_i2v/model-00004-of-00004.safetensors1.8 GB
- text_encoder_2/tf_model.h51.7 GB
- text_encoder_2/pytorch_model.bin1.7 GB
- text_encoder_2/model.safetensors1.7 GB
- text_encoder_2/flax_model.msgpack1.7 GB
- hunyuan-video-i2v-720p/vae/pytorch_model.pt986.0 MB
- assets/HYWorld_Voyager.pdf38.0 MB
- text_encoder_i2v/tokenizer.json9.1 MB
- text_encoder_2/tokenizer.json2.2 MB
- text_encoder_2/vocab.json961.1 KB
- text_encoder_2/merges.txt524.6 KB
- text_encoder_i2v/model.safetensors.index.json70.1 KB
- text_encoder_i2v/tokenizer_config.json51.7 KB
- NOTICE17.6 KB
- LICENSE17.2 KB
- text_encoder_2/README.md7.9 KB
- text_encoder_i2v/README.md5.6 KB
- text_encoder_2/config.json4.5 KB
- README.md2.4 KB
- .gitattributes1.6 KB
- text_encoder_i2v/.gitattributes1.5 KB
- text_encoder_2/.gitattributes1.2 KB
- text_encoder_i2v/config.json1.1 KB
- text_encoder_2/tokenizer_config.json905 B
- text_encoder_i2v/preprocessor_config.json819 B
- hunyuan-video-i2v-720p/vae/config.json785 B
- text_encoder_i2v/special_tokens_map.json463 B
- text_encoder_2/special_tokens_map.json389 B
- text_encoder_2/preprocessor_config.json316 B
- text_encoder_i2v/generation_config.json121 B
- config.json48 B
- Voyager/config.json47 B
הרישיון
הרישיון מוגדר כ־other וטנסנט לא פירטו תנאים ברורים בעמוד עצמו. במצב כזה אסור להניח שמותר להשתמש בו במוצר מסחרי. לפני שמשלבים אותו בקוד שמופץ למשתמשים, חייבים לבדוק את קובץ הרישיון המדויק במאגר כדי לוודא שאין שם הגבלות מסחריות או דרישות מיוחדות.