Hunyuan3D-1 — הדגמה
קוד פתוחtencentother2024-11-01
הכלי מייצר מודלים תלת ממדיים מטקסט או מתמונות עבור יוצרי תוכן ומפתחים. הוא כולל תצוגה מקדימה אינטראקטיבית וייצוא קבצים ישירות מהדפדפן.
- 15.0 GBמשקל הקבצים
- —הורדות בחודש
- 270לייקים
מה זה
ההזנה מבוססת על תיאור טקסטואלי באנגלית או בסינית, או על העלאת תמונת דו ממד בודדת. בפלט מקבלים רשת תלת ממדית עם צביעת קודקודים או פאות, תמונה מרובת זוויות, וקובץ גיף שמרנדר את התוצאה בסיבוב.
מאחורי הקלעים פועל תהליך דו שלבי. אם מתחילים מטקסט, מודל HunyuanDiT מייצר תחילה תמונת מקור. לאחר מכן מודל דיפוזיה מייצר תמונות של האובייקט מזוויות שונות בתוך כארבע שניות, ורשת שחזור מהירה בונה מהן את גיאומטריית התלת ממד בכשבע שניות נוספות. אפשרות האפייה משלבת את מודל הראייה DUSt3R לצורך התאמת טקסטורות מדויקת.
הממשק מספק דוגמאות מובנות להרצה מהירה, כמו הנחיית ברירת מחדל בסינית ליצירת דמות פנדה מצוירת בישיבה על רקע לבן, לצד מאגר תמונות מוכן לניסיון מיידי.
מתאים ל
- יצירת נכסי תלת ממד למשחקים
המרת איורי קונספט או תיאורים מילוליים למודלים תלת ממדיים ראשוניים לצורך בדיקות סביבה מהירות.
- הפקת מודלים להדפסה
יצירת רשתות מצולעים מתמונות בודדות לצורך עיבוד נוסף בתוכנות עריכה והכנה לקבצי הדפסה תלת ממדית.
- בדיקת זוויות בעיצוב מוצר
תרגום תמונת דו ממד למודל מסתובב בפורמט גיף כדי לבחון נפח והתנהגות גיאומטרית מכל הכיוונים.
איפה זה נופל
המגבלה המיידית היא שהאפליקציה פשוט לא מגיבה כרגע עקב שגיאת ריצה בשרת. גם כשהיא עובדת, יצירת טקסט תומכת באנגלית ובסינית בלבד ולא בעברית. שימוש במודל האפייה מבוסס על DUSt3R ודורש משאבים נוספים, ובמידה ומריצים את הקוד עצמאית נדרש זיכרון כרטיס מסך כבד של 14 עד 30 גיגה בייט כדי למנוע קריסות.
שאלות
נפוצות
האם השימוש באפליקציה הזאת כרוך בתשלום כלשהו?
הפעלת ההדגמה בחינם לחלוטין ואינה דורשת כרטיס אשראי או תשלום. עם זאת, נכון לעכשיו השרת של העמוד מדווח על שגיאת ריצה, ולכן אי אפשר לבצע חישובים ישירות דרך האתר. הפתרון הזמין כרגע הוא התקנת הקוד בחומרה פרטית.
האם ניתן להריץ את המערכת על מחשב ביתי באופן מקומי?
כן, הקוד והמשקלים פתוחים להורדה מגיטהאב ומהאגינג פייס. תזדקקו למחשב לינוקס עם כרטיס מסך חזק של 14 עד 30 גיגה בייט זיכרון גרפי, בהתאם לגרסת המודל. קיימים גם חיבורים קהילתיים לתוכנת ComfyUI שמקלים על ההפעלה.
כמה זמן אורך תהליך היצירה של מודל יחיד?
לפי נתוני היצרן, גרסת הלייט אורכת כ 10 שניות והגרסה הסטנדרטית לוקחת כ 25 שניות לייצור מלא מתמונה. שלב יצירת הזוויות לוקח כ 4 שניות והשחזור הגיאומטרי עוד כ 7 שניות. במידה ומפעילים אופציות מתקדמות כמו אפיית טקסטורה, הזמן מתארך בהתאם.
האם אפשר להשתמש במודל מסחרית לעסקים או פרויקטים?
הרישיון של המאגר הראשי אינו מוגדר, ולכן מבחינה משפטית אין אישור מסחרי גורף לתוצרים. יתרה מזאת, מודול האפייה מבוסס על קוד ברישיון מחקרי שאינו מאפשר פעילות עסקית. מומלץ להימנע משימוש מסחרי עד להסדרת הרישוי.
איך מריצים
בוחרים בין לשונית טקסט ללשונית תמונה, מזינים את הקלט ולוחצים על כפתור Generate. תחת הגדרות מותאמות אישית אפשר לקבוע את כמות הפאות המקסימלית, מספר צעדי הדגימה וערכי הסיד. לפי נתוני הפיתוח, גרסת הלייט מייצרת מודל סביב 10 שניות וגרסת הסטנדרט דורשת כ 25 שניות. בפועל הדף נמצא כעת במצב שגיאת ריצה, כך שאי אפשר להפעיל אותו בענן של הדמו עד שהתקלה תתוקן על ידי המפרסם.
pip install -U huggingface_hub hf download tencent/Hunyuan3D-1
הקבצים
43 קבצים במאגר, 15.0 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
- mvd_std/unet/diffusion_pytorch_model.safetensors5.1 GB
- mvd_std/vision_encoder_2/model.safetensors3.7 GB
- mvd_lite/unet/diffusion_pytorch_model.safetensors3.5 GB
- mvd_lite/vision_encoder/model.safetensors1.3 GB
- svrm/svrm.safetensors917.5 MB
- mvd_lite/text_encoder/model.safetensors680.8 MB
- mvd_std/vision_encoder/model.safetensors608.0 MB
- mvd_lite/vae/diffusion_pytorch_model.safetensors167.3 MB
- mvd_std/vae/diffusion_pytorch_model.safetensors167.3 MB
- assets/teaser.png3.1 MB
- mvd_lite/tokenizer/vocab.json1.1 MB
- mvd_std/uc_text_emb.pt631.5 KB
- mvd_lite/tokenizer/merges.txt524.6 KB
- assets/logo.png313.8 KB
- assets/overview_3.png270.8 KB
- assets/radar.png121.6 KB
- assets/runtime.png38.4 KB
- Notice26.9 KB
- LICENSE.txt16.9 KB
- README.md9.7 KB
- mvd_std/uc_text_emb_2.pt5.9 KB
- mvd_lite/model_index.json2.6 KB
- mvd_std/model_index.json2.6 KB
- mvd_lite/unet/config.json2.0 KB
- mvd_std/unet/config.json1.8 KB
- .gitattributes1.6 KB
- mvd_lite/.gitattributes1.5 KB
- mvd_lite/tokenizer/tokenizer_config.json855 B
- mvd_std/vae/config.json812 B
- mvd_lite/vae/config.json745 B
- mvd_lite/text_encoder/config.json708 B
- mvd_lite/vision_encoder/config.json672 B
- mvd_std/vision_encoder/config.json580 B
- mvd_std/vision_encoder_2/config.json577 B
- mvd_lite/feature_extractor_clip/preprocessor_config.json466 B
- mvd_lite/vision_encoder/preprocessor_config.json466 B
- mvd_std/vision_processor/preprocessor_config.json466 B
- mvd_lite/tokenizer/special_tokens_map.json460 B
- mvd_std/scheduler/scheduler_config.json421 B
- mvd_lite/scheduler/scheduler_config.json391 B
הרישיון
הרישיון הכללי של המאגר לא דווח ברישומי הפרויקט, ולכן ברירת המחדל המשפטית אינה מאפשרת שימוש מסחרי מובטח בקוד או בתוצרים. בנוסף, מודל האפייה של הטקסטורות מבוסס על DUSt3R שמופץ תחת רישיון לא מסחרי מחמיר, כך שכל שימוש במודול זה מוגבל למטרות מחקר ושימוש אישי בלבד.