lingbot-vla-v2-6b
קוד פתוחrobbyantרישיון לא דווח2026-07-07
מודל ראייה, שפה ופעולה שמיועד לשליטה ברובוטים ובזרועות מכניות. הוא מעבד וידאו וטקסט כדי להוציא פקודות תנועה מדויקות ישירות למפרקים ולבסיס.
- 6.4Bפרמטרים
- 26.3 GBמשקל הקבצים
- 1,613הורדות בחודש
- 38לייקים
מה זה
מדובר במודל VLA בגודל 6.4 מיליארד פרמטרים שמחבר בין קלט חזותי והוראות טקסטואליות לפעולות פיזיות בעולם האמיתי. הוא אומן על מאגר של כשישים אלף שעות, שכולל חמישים אלף שעות ריצה על פני עשרים תצורות רובוטיות שונות ועשרת אלפים שעות של וידאו מגוף ראשון של בני אדם.
בניגוד למודלים שמסתפקים רק בזרועות סטנדרטיות, כאן מרחב הפעולה כולל גם גריפרים, ידיים מרובות אצבעות, תנועות מותן, ראש ובסיס נייד. הארכיטקטורה משלבת שכבות מומחים דלילות כדי לחלק עומס בין פעולות כלליות להתנהגויות ספציפיות לחומרה, ומשתמשת בזיקוק תפיסתי שחוזה את התפתחות הסביבה בזמן אמת.
מתאים ל
- שליטה בזרוע רובוטית
המודל מפיק פקודות תנועה ישירות למפרקים ולגריפר מתוך הבנת תמונה והוראה קולית.
- ניווט רובוט שירות נייד
הוא כולל תמיכה מובנית בבסיס נע ומאפשר שילוב בין תנועה במרחב לבין הזזת ראש ומותן.
- מחקר רובוטיקה מעשי
אימון מוקדם על עשרות אלפי שעות מאפשר להשתמש בו כבסיס מוצק לכיוונון על חומרה חדשה.
איפה זה נופל
המודל דורש התאמה ישירה לחומרה הפיזית שלכם, כי עשרים התצורות שעליהן הוא אומן לא בהכרח תואמות את החיישנים או את המפרקים שיש לכם בפועל. חיזוי העתיד והדינמיקה נשען על קלטי עומק ורמזים סמנטיים, ובסביבה רועשת או בתאורה חלשה פקודות התנועה עלולות לסטות ולגרום נזק לציוד יקר. אל תתנו לו שליטה מלאה בלי מנגנוני הגנה פיזיים ולחצן חירום.
שאלות
נפוצות
אפשר להריץ אותו ישירות על הרובוט עצמו?
המודל שוקל מעל 26 גיגה בייט, כך שאי אפשר להריץ אותו על כרטיסי קצה קטנים. תצטרכו מחשב מובנה חזק מאוד על גבי הרובוט או תקשורת אלחוטית מהירה במיוחד לשרת מקומי.
האם הוא מוגבל רק למשימות הרמה והנחה פשוטות?
לא, המודל אומן על מרחב תנועה רחב שכולל ידיים מרובות אצבעות, גוף שלם ובסיס נייד. עם זאת, הוא עדיין תלוי ביכולת שלכם למפות את פקודות התנועה שלו לפרוטוקול הבקרה של הרובוט שלכם.
איך מריצים
המשקלים תופסים 26.3 גיגה בייט בזיכרון, מה שאומר שתצטרכו כרטיס גרפי מקצועי עם לפחות 32 גיגה בייט של VRAM כדי לטעון אותו להסקה ישירה בלי לכווץ אותו קודם. לרובוטים ניידים בשטח שלא סוחבים שרת ייעודי, צריך לחשוב מראש על קוונטיזציה או על עיבוד במחשב קרוב ברשת המקומית.
אם אתם רק בודקים אלגוריתמים בסימולציה ולא מריצים מערכת פיזית שמחייבת זמני תגובה אפסיים, אפשר לפרוס אותו בענן פרטי. אין כאן גרסת ענן ציבורית מוכנה בחיבור פשוט, כך שכל ההרצה והתחזוקה נופלות עליכם ישירות מהקוד.
pip install -U huggingface_hub hf download robbyant/lingbot-vla-v2-6b
הקבצים
23 קבצים במאגר, 26.3 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
- model-00004-of-00006.safetensors5.0 GB
- model-00005-of-00006.safetensors5.0 GB
- model-00001-of-00006.safetensors5.0 GB
- model-00002-of-00006.safetensors5.0 GB
- model-00003-of-00006.safetensors4.9 GB
- dino_video/teacher_step_10000.pth1.4 GB
- depth/model.pt1.3 GB
- model-00006-of-00006.safetensors622.2 MB
- tokenizer.json11.4 MB
- vocab.json2.8 MB
- assets/lingbot_vla2_vis_distillation.png2.3 MB
- assets/lingbot_vla2_framework.png1.2 MB
- assets/lingbot_vla2_loss_mse_comparison.png445.7 KB
- model.safetensors.index.json207.4 KB
- tokenizer_config.json5.5 KB
- README.md2.2 KB
- .gitattributes1.8 KB
- dino_video/config.yaml1.4 KB
- video_preprocessor_config.json817 B
- preprocessor_config.json782 B
- added_tokens.json707 B
- special_tokens_map.json613 B
- config.json31 B
הרישיון
בטקסט של הפרויקט מצוין רישיון Apache-2.0, שמתיר שימוש מסחרי, שינוי קוד והפצה חופשית, אבל המטא נתונים בראש העמוד לא מדווחים על רישיון מסודר. לפני שאתם שוזרים את הקבצים האלה בתוך רובוט מסחרי או מוצר שנמכר ללקוחות, כדאי לוודא את הרישוי המדויק ישירות מול המאגר בגיטהאב כדי למנוע חשיפה משפטית.