clawbody
רץ בדפדפןtomrikertרישיון לא דווח2026-02-02
הפרויקט מחבר סוכן בינה מלאכותית של OpenClaw לגוף של רובוט Reachy Mini או לסימולטור שלו. הוא מיועד למפתחים שרוצים לתת לאסיסטנט קולי נוכחות פיזית עם תנועות ראש ומעקב פנים.
- —הורדות בחודש
- 37לייקים
מה זה
הכלי מקבל קלט קולי מהמיקרופון ותמונות ממצלמת הרובוט או המחשב, ומחזיר תגובות קוליות לצד פקודות תנועה פיזיות. הרובוט מזיז את הראש לכיוון הפנים של מי שמדבר, מביע רגשות בתנועה ויכול לרקוד או להביט לכיוונים שונים לפי השיחה.
מאחורי הקלעים רץ שילוב של מערכות. זיהוי הפנים מתבסס על MediaPipe או על מודל YOLOv11n בקצב של 25 הרץ, והמערכת נעזרת במודל הווידאו SmolVLM2. השיחה הקולית מופעלת ישירות מול ה־Realtime API של OpenAI, כשההיגיון והכלים מגיעים משרת ה־OpenClaw שלכם.
הדף מכיל קישור להדגמה מונפשת שמציגה את הרובוט Reachy Mini רוקד, ומסביר כיצד להרים הדמיית תלת ממד מלאה מבוססת MuJoCo בלי חומרה פיזית.
מתאים ל
- בדיקת בוטים בסימולטור
הרצת סוכן קולי בהדמיית תלת ממד עם MuJoCo, לבדיקת תנועות ראש ותגובתיות בלי לקנות רובוט אמיתי.
- הפעלת רובוט Reachy Mini
חיבור סוכן OpenClaw לחומרה פיזית דרך SSH, כדי שיעקוב אחרי אנשים בחדר וידבר דרך הרמקול המובנה.
- ממשק קולי עם מעקב פנים
שילוב זיהוי פנים ב־25 הרץ יחד עם ה־Realtime API של OpenAI לשיחה טבעית שמגיבה למיקום המשתמש.
איפה זה נופל
הפרויקט לא עובד בלחיצת כפתור בדפדפן ומחייב התקנה מקומית מורכבת של כלי סימולציה כבדים או חומרה יקרה. בנוסף, הוא תלוי לחלוטין ברכיבים חיצוניים: ללא שרת OpenClaw פעיל וללא מפתח פרטי עם גישה ל־Realtime API של OpenAI, לא תהיה שום יכולת שיחה. זיהוי פנים ב־YOLO דורש יותר משאבי מחשוב מאשר MediaPipe, והתנועות הפיזיות מוגבלות לפלג הגוף העליון והראש של Reachy Mini.
שאלות
נפוצות
האם אפשר להשתמש בזה בחינם?
הקוד עצמו פתוח לשימוש חופשי, אבל ההרצה כרוכה בעלויות. תצטרכו לשלם על צריכת ה־Realtime API של OpenAI לפי תעריפי החברה, לצד עלויות החומרה של הרובוט אם בוחרים לעבוד איתו.
האם אפשר להריץ את זה מקומית?
כן, זו למעשה הדרך היחידה להריץ את זה. צריך להתקין את הפרויקט מקומית בסביבת פייתון, להרים סימולטור MuJoCo או להתחבר לרובוט, ולהריץ ממשק Gradio על המחשב.
מה קורה עם המידע, הקול והווידאו שלי?
האודיו שלכם נשלח ישירות לשרתי OpenAI לצורך עיבוד קולי, ותמונות או פקודות מעובדות מול שרת ה־OpenClaw שלכם. שום דבר מזה לא עובר דרך העמוד ב־Hugging Face כי הוא רק עמוד סטטי.
האם חייבים לקנות את הרובוט Reachy Mini?
לא. המערכת כוללת תמיכה מלאה בהדמיה מבוססת MuJoCo, שמאפשרת לראות את הרובוט בתלת ממד על מסך המחשב ולדבר איתו דרך המיקרופון של הדפדפן.
איך משתמשים
הדף ב־Hugging Face מוגדר כ־static ומשמש כתיעוד בלבד, כך שאי אפשר להפעיל את הרובוט ישירות מתוכו בדפדפן. כדי להשתמש בו צריך לשכפל את הקוד מ־GitHub לסביבת פייתון מקומית 3.11 ומעלה, להתקין את התלויות, ולהגדיר מפתחות API של OpenAI וכתובת של שרת OpenClaw. משם מריצים במקביל את שרת ההדמיה או מתחברים ישירות לחומרה של Reachy Mini, ומפעילים ממשק Gradio מקומי בכתובת המקומית בפורט 7860.
הרישיון
למרות שבמטה דאטה של העמוד נכתב שהרישיון לא דווח, התיעוד הרשמי מציין במפורש רישיון Apache 2.0. הרישיון הזה מתיר שימוש חופשי, שינוי והפצה, כולל לצרכים מסחריים, בכפוף לשמירה על זכויות היוצרים.