ARDY-Core-RP-20FPS-Horizon40

מה זה

מדובר במודל דיפוזיה אוטורגרסיבי עם 326 מיליון פרמטרים שמבוסס על ארכיטקטורת טרנספורמר דו-שלבית. המטרה שלו היא לייצר רצפי תנועה של שלד בעל 27 מפרקים בקצב של 20 פריימים לשנייה, עם אופק תכנון של 40 פריימים בכל צעד. הקלט כולל טקסט, היסטוריית תנועה של עד שמונה שניות, ואילוצים גמישים כמו מסלול תנועה במרחב, נקודות ציון, קיפריימים מלאים או סיבובי מפרקים ספציפיים. הפלט מספק סיבובי מפרקים והעתקה מרחבית גלובלית של השלד למשך מקסימלי של שמונה שניות.

הוא אומן על מאגר Bones Rigplay 1 שכולל 630 שעות של לכידת תנועה אופטית יחד עם תיאורי טקסט מגוונים, ונבדק על 70 שעות נוספות מקטגוריות שלא נכללו באימון. השילוב בין מנגנון אוטורגרסיבי לתהליך דיפוזיה מאפשר לו להגיב בזמן אמת לפקודות מתחלפות בלי לקטוע את התנועה הקודמת, מה שמבדיל אותו ממודלים שמייצרים קליפ בודד מראש וסובלים מבעיות חיבור.

מתאים ל

• תנועת דמויות במשחקים

  שליטה בזמן אמת בריצת הדמות ושינויי כיוון לפי נתיב הליכה וטקסט.

• תכנון תנועה לרובוטיקה

  הפקת מסלולי גוף מלא לשלד דמוי-אדם לפי אילוצי מיקום ונקודות ציון.

• סימולציות ותאומים דיגיטליים

  הנפשת עובדים דיגיטליים במרחב תעשייתי לפי פעולות יומיומיות ומחוות.

איפה זה נופל

הוא מוגבל לשלד בודד של 27 מפרקים ולא יודע להתאים את עצמו לשלדים מותאמים אישית. הכרטיס מציין במפורש תופעות של החלקת רגליים על הרצפה במקום מגע סטטי יציב, לצד חוסר התחשבות מוחלט באובייקטים וסביבה פיזית. הוא לא מסוגל לייצר תנועות קרטוניות או שאינן אפשריות פיזית, ולא תמיד עוקב במדויק אחרי הנחיות טקסט מורכבות.

איך מריצים

המודל פועל בסביבת לינוקס מעל פייתורץ' ודורש את ספריית ardy של אנבידיה, עם אופטימיזציה מובנית לטנסור ארטי. הוא נבדק על כרטיסי מסך A100 ו־RTX 4090, ונתמך בארכיטקטורות אמפר, הופר ובלקוול. בהתחשב במשקל של 730 מגה-בייט בלבד, כרטיס RTX 4090 מקומי יספיק לכם לחלוטין להרצה בזמן אמת בלי שום צורך בתשתיות ענן מורכבות.

הגרסה הזו מוגדרת לאופק של 40 פריימים ושלד Core של 27 מפרקים. אם אתם צריכים זמן תגובה מהיר בהרבה על חשבון עקביות ארוכת טווח, קיימת גרסת Horizon8. אם אתם עובדים ישירות עם רובוט Unitree G1, יש לאנבידיה גרסאות נפרדות שמאומנות על השלד הספציפי שלו ב־25 פריימים לשנייה. אין כאן שירות ענן רשמי, כך שהרצה מקומית על חומרה מתאימה היא הדרך היחידה לעבוד איתו כרגע.

pip install -U huggingface_hub
hf download nvidia/ARDY-Core-RP-20FPS-Horizon40

הקבצים

12 קבצים במאגר, 730 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• denoiser.safetensors623.3 MB
• tokenizer.safetensors141.7 MB
• README.md13.1 KB
• LICENSE10.2 KB
• stats/motion/mean.npy2.8 KB
• stats/motion/std.npy2.8 KB
• config.yaml1.6 KB
• .gitattributes1.5 KB
• stats/post_quantization/mean.npy640 B
• stats/post_quantization/std.npy640 B
• stats/pre_quantization/mean.npy640 B
• stats/pre_quantization/std.npy640 B

הרישיון

השימוש כפוף להסכם המודלים הפתוחים של אנבידיה (NVIDIA Open Model Agreement). הרישיון מאפשר שימוש מסחרי ושימוש לא מסחרי, אך כולל הגבלות שימוש והתניות משפטיות שמופיעות בנוסח המלא של החברה. עליכם לוודא שהמוצר שאתם מפיצים עומד בתנאי ההסכם הזה.

הרישיון המלא בעמוד המודל ↗