epic_kitchens_100

מה זה

המאגר כולל 1,102 קבצים שמכילים נתוני וידאו ואודיו שצולמו במצלמות גופרו, לצד קריאות של חיישני תאוצה וג'ירוסקופ שנשמרו בקובצי CSV לפי משתתפים. לפי שמות הקבצים והתיקיות, המידע מחולק לפי נבדקים, כמו תיקיית P01, ומכיל נתוני מדידה רציפים שמלווים את ההתרחשות במטבחים.

המקור מגיע מהמחקר האקדמי המקורי של EPIC-KITCHENS מ־2018, והועלה מחדש למאגר הזה כדי לפתור בעיות מהירות הורדה שהיו בקישורים הרשמיים ובטורנט. בנוסף לנתונים הטכניים, המאגר מצרף את הנחיות האיסוף המקוריות בפורמט PDF, הגדרות מצלמה בקובצי תמונה, וטופסי הסכמה של המשתתפים.

מתאים ל

• סיווג פעולות בווידאו

  אימון מודלים לזיהוי פעולות בישול וחיתוך מנקודת מבט ראשונה של המשתמש.

• זיהוי פעילות קולית

  איתור קטעי דיבור ורעשי רקע של עבודה בסביבת מטבח ביתית מתוך רצועות השמע.

• היתוך מידע מחיישנים

  שילוב נתוני תאוצה וג'ירוסקופ יחד עם תמונות וידאו לצורך מעקב תנועה מדויק.

איפה זה נופל

הנתונים מתבססים על מחקר שנערך ב־2018, כך שאיכות הצילום והציוד מוגבלים לחומרה שהייתה זמינה אז. אין בכרטיס תיעוד מלא לגבי חלוקת שפות בדיבור, ייצוג גאוגרפי, או כיסוי מגוון של מטבחים שונים. בנוסף, חסר פירוט מלא בכרטיס לגבי אופן חלוקת הנתונים לאימון ובדיקה, ולכן תצטרכו להסתמך על קובצי ההנחיות המצורפים כדי להבין את המבנה המדויק.

איך טוענים

טוענים את הקבצים ישירות מהמאגר בעזרת הספרייה של Hugging Face או באמצעות הורדת התיקיות הרלוונטיות למחשב. אין כאן תהליך אישור גישה מוקדם או צורך בהרשמה מיוחדת מעבר לגישה למאגר. תמצאו בפנים נתוני חיישנים מקבילים של תאוצה וג'ירוסקופ יחד עם קובצי המדיה, כך שצריך לוודא התאמת זמנים בין קובצי ה־CSV לצילומי המצלמה לפני תחילת העבודה.

from datasets import load_dataset

ds = load_dataset("awsaf49/epic_kitchens_100")

הרישיון

הרישיון הוא cc-by-nc-4.0. המשמעות היא שמותר להוריד, לשנות ולפתח מודלים על בסיס הנתונים לצרכים אקדמיים או אישיים בלבד, תוך מתן קרדיט ליוצרים המקוריים. שימוש מסחרי מכל סוג אסור, ולכן אי אפשר להטמיע מודל שאומן על המאגר בתוך מוצר מסחרי שמוכרים ללקוחות.

• שינוי הקוד
• חובת ייחוס
• שימוש מסחרי: לא

הרישיון המלא ב־Hugging Face ↗