GPT
V

visualize_dataset

רץ בדפדפן

lerobotapache-2.02024-07-17

  • docker

ממשק לצפייה, תחקור ועריכת תיוגים של מאגרי מידע לרובוטיקה בפורמט LeRobot. מתאים למי שמאמן מודלים לזרועות רובוטיות וצריך לסנן פרקים פגומים.

  • הורדות בחודש
  • 644לייקים

מה זה

בוחרים מאגר נתונים ופרק מתוך המאגר, ומקבלים נגן וידאו שמסונכרן במדויק עם גרפים של חיישנים ואותות בקרה. יש כאן תצוגת תלת-ממד של שלד הרובוט בזמן אמת, מפת חום של שונות בין תנועות, היסטוגרמות של זמני הקלטה ופאנל לזיהוי תנועות קופצניות או חוסר תנועה.

המערכת רצה בצד הלקוח בעזרת Next.js וקוראת קובצי Parquet ו־JSON ישירות באמצעות ספריית hyparquet. תצוגת הרובוט נשענת על מודלי URDF עם Three.js, כשהיא תומכת מראש בזרועות SO-100, SO-101 ו־OpenArm. בנוסף, יש כלי לעריכת תיוגי שפה ושאלות-תשובות חזותיות ישירות על גבי הווידאו.

מתאים ל

  • סינון פרקי אימון פגומים

    איתור הקלטות עם תנועות חדות מדי או חוסר תזוזה וייצוא רשימת מזהים לפקודת LeRobot CLI.

  • תחקור תנועות זרוע בתלת-ממד

    צפייה בזוויות המפרקים ובמסלול קצה הזרוע ב־URDF במקביל לווידאו המצולם.

  • תיוג שפה ומשימות על הווידאו

    ציור תיבות גבול ונקודות מפתח ישירות על גבי הפריימים והגדרת תת-משימות לרובוט.

איפה זה נופל

הכלי מיועד לתחקור נתונים בלבד ולא מריץ אימון של מודלים או בדיקות מדיניות בפועל. דגמי הרובוטים בתלת-ממד מוגבלים לזרועות מסוימות בלבד, ואם תרצו לשמור עריכות של תיוגים בחזרה לקובצי Parquet או לדחוף אותם ל־Hub, תצטרכו להרים שרת FastAPI ייעודי ברקע, אחרת השינויים נשמרים רק בזיכרון המקומי של הדפדפן.

שאלות
נפוצות

האם השימוש באפליקציה כרוך בתשלום?

לא, הגישה חופשית לחלוטין דרך הדפדפן והקוד פתוח. אין מדרגות תשלום או צורך בהזנת פרטי אשראי.

האם אפשר להריץ את הכלי מקומית על המחשב?

כן, אפשר להריץ את התוכנה ישירות דרך מנהל החבילות Bun או לבנות קונטיינר דוקר לפי ההוראות בקוד. זה שימושי במיוחד כשרוצים לבדוק מאגרי מידע מקומיים בלי לגשת לרשת.

האם השינויים שאני מבצע בתיוגים נשמרים אוטומטית?

לא בשרת. כברירת מחדל כל התיוגים ועריכות הטקסט נשמרים רק ב־sessionStorage של הדפדפן שלכם, וכדי לשכתב קובצי Parquet בפועל יש לחבר שרת FastAPI צדדי.

במה הכלי הזה שונה מספרית LeRobot עצמה?

הספרייה משמשת לאימון והסקה של מודלי למידה לרובוטיקה דרך שורת הפקודה. הכלי הזה הוא ממשק ויזואלי בלבד שמטרתו לבדוק את איכות הדאטה לפני ששולחים אותו לאימון.

איך משתמשים

פותחים את הדפדפן וניגשים ישר לממשק בלי צורך בהתחברות מראש. השרת פועל תחת חומרת cpu-upgrade בתוך קונטיינר דוקר, כך שטעינת הממשק הראשונית מיידית. זמן הטעינה של הפרקים עצמם תלוי בקצב משיכת קובצי ה־Parquet וסרטוני הווידאו משרתי Hugging Face.

הרישיון

הפרויקט מופץ תחת רישיון apache-2.0 חופשי שמתיר שימוש מסחרי ושינוי קוד. הנתונים שאתם פותחים מגיעים ממאגרים ציבוריים או מכתובת שתגדירו, והשמירה של תיוגים חדשים נשארת אצלכם בדפדפן אלא אם חיברתם שרת ייעודי שדוחף אותם חזרה.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗