HRDexDB
קוד פתוחHRDexDBcc-by-nc-4.02026-06-19
מאגר וידאו וחיישנים של תפיסת חפצים מיומנת, שמצמיד תנועות ידי אדם לפעולות של רובוטים שונים. החומר מאפשר ללמוד העברת מיומנויות תפיסה ישירות מהדגמות אנושיות לידיים רובוטיות.
- 68,655הורדות בחודש
- 16לייקים
מה זה
הנתונים כוללים מעל 2,100 רצפי תפיסה של יותר מ־100 חפצים שונים, על פני חמש תצורות גוף שונות של ידיים אנושיות ורובוטיות, כמו allegro_v5 או inspire_dftp. כל רצף מציג לכידה מסונכרנת של הדגמת תפיסה אנושית לצד ביצוע רובוטי, בליווי אותות מגע מחיישנים טקטיליים.
המבנה הפנימי נשען על קובצי npy ו־npz שמתעדים תנוחות גוף, נתוני מצלמות, פוזות של אובייקטים בשישה ממדים ופעולות של הזרוע. החוקרים מסיאול סינכרנו את הנתונים, הצמידו קישורים מאומתים בין פעולות האדם לרובוט, והוסיפו רשתות תלת-ממדיות מעודכנות ומעקב תנוחה ששופרו בעדכונים מאוחרים.
מתאים ל
- העברת תפיסה מאדם לרובוט
אימון מודלים שממירים הדגמת תנועת יד אנושית לתנועת אצבעות תואמת על גבי יד רובוטית רב-מפרקית.
- הערכת תנוחה ומעקב חפצים
בדיקת אלגוריתמים למעקב ששת ממדים אחר אובייקטים בזמן תפיסה והסתרה חלקית על ידי אצבעות רובוטיות.
- שילוב אותות מגע וראייה
פיתוח מדיניות אחיזה המשלבת פידבק מחיישני מגע יחד עם ערוצי מצלמה מכוילים בזמן אמת.
איפה זה נופל
החומר לא מכיל פיצול מוגדר מראש למבחן ואימון, מה שדורש מכם לבנות חלוקה זהירה כדי למנוע דליפת מידע בין חפצים דומים. מדובר בדאטהסט מעבדתי טהור שמתמקד בתפיסה בלבד, ללא שפה טבעית או גיוון בסביבות רקע פראיות. בנוסף, חלקי מידע כמו מעקב אובייקטים ומודלים תלת-ממדיים עברו עדכוני גרסה עקב אי-דיוקים בגרסה הראשונית, וחשוב לוודא שאתם מושכים את הקבצים מתיקיות התיקון.
שאלות
נפוצות
האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?
לא, הרישיון שנבחר הוא cc-by-nc-4.0 שמונע כל שימוש מסחרי מכל סוג. הוא מיועד למחקר אקדמי ולניסויים בלבד. אם תאמנו עליו מודל שיוטמע במוצר מסחרי, זו תהיה הפרה ישירה של הרישיון.
איך בנויים הנתונים והאם קל להוריד אותם?
המאגר מורכב מיותר משמונים אלף קבצים קטנים וגדולים, כולל קובצי npy, פרמטרים בפורמט json ורשתות תלת-ממדיות. הורדה ישירה של כל כך הרבה קבצים בודדים עלולה להיות איטית מאוד. היוצרים מציעים להשתמש במראה שהם פתחו בגוגל דרייב כדי להוריד ארכיוני זיפ שלמים.
האם יש במאגר טקסט או הנחיות בעברית?
אין במאגר עברית כלל ואין בו טקסט חופשי. מדובר בדאטהסט רובוטיקה ייעודי שמכיל קואורדינטות תלת-ממדיות, פוזות, תמונות מצלמה ואותות מגע. כל שמות המשתנים והמטא-דאטה מנוהלים באנגלית טכנית בלבד.
במה הוא שונה מדאטהסטים אחרים של אחיזה רובוטית?
הייחוד המרכזי הוא הצימוד הישיר בין אדם למכונה על פני חמש תצורות ידיים שונות. במקום ללמוד רק מרובוט או רק מווידאו אנושי, יש כאן לכידה מסונכרנת של אותן משימות עם מעקב תלת-ממדי ואותות מגע. זה מאפשר לפתור את פערי המבנה בין כף היד האנושית ליד המכנית.
איך טוענים
טעינת המטא-דאטה מתבצעת בעזרת הספרייה datasets של Hugging Face, תוך ציון אחת מחמש התצורות הזמינות כמו episodes או pairings. שימו לב שהחלוקה שנקראת train היא למעשה קטלוג מלא של כל הנתונים שפורסמו, ולא חלוקת אימון תקנית. הקבצים עצמם, שכוללים מעל שמונים אלף פריטים כבדים כמו מערכי נתונים ופרמטרי מצלמה, זמינים להורדה ישירה או דרך מראה ייעודי בגוגל דרייב שמציע קובצי זיפ.
from datasets import load_dataset
ds = load_dataset("HRDexDB/HRDexDB")הרישיון
הרישיון שהוגדר הוא cc-by-nc-4.0. המשמעות ברורה וחדה, אין שום אפשרות להשתמש בנתונים האלה למוצר מסחרי, לחברה מניבה או לכל פעילות שמטרתה רווח כספי. מותר להשתמש בחומר רק לצורכי מחקר פנימי, אקדמיה או ניסויים אישיים, וחובה לתת ייחוס מתאים ליוצרים. שימוש במודל שאומן על הדאטהסט בתוך מוצר מסחרי מפר ישירות את תנאי הרישיון.
- שינוי הקוד
- חובת ייחוס
- שימוש מסחרי: לא