LaDe
קוד פתוחCainiao-AIapache-2.02023-06-05
נתוני שטח אמיתיים של משלוחים ואיסופים מתעשיית הלוגיסטיקה הסינית, כולל מעקבי מיקום מדויקים של שליחים. המאגר מיועד לפיתוח מודלים של חיזוי מסלולים וזמני הגעה בעולם האמיתי.
- 1,998הורדות בחודש
- 34לייקים
מה זה
הנתונים מתעדים מעל עשרה מיליון חבילות ופעילות של כעשרים ואחת אלף שליחים לאורך חצי שנה של עבודה מבצעית. המאגר מחולק לשני תרחישים מרכזיים, איסוף חבילות ומסירת חבילות, שנאספו מחמש ערים שונות בסין: שנגחאי, האנגג'ואו, צ'ונגצ'ינג, ג'ילין ויאנטאי. כל עיר מציגה מאפיינים שונים של נפח הזמנות, גודל אוכלוסייה ומבנה טופוגרפי ורשת כבישים.
ברמת הרשומה, כל שורה בטבלאות האיסוף והמסירה כוללת מזהי חבילה ושליח, קואורדינטות יעד, מזהה אזור גאוגרפי, סיווג נקודת העניין, וצירי זמן מלאים של קבלת המשימה וביצועה בפועל. בנוסף ישנם קבצי מעקב שמתעדים את מיקום ה־GPS של השליחים בדגימה של כל עשרים שניות, יחד עם נתוני רשת הכבישים של הערים שנבדקו.
מתאים ל
- חיזוי מסלולי שליחים
אימון מודלים שמנבאים את סדר העצירות האופטימלי של שליח על בסיס היסטוריית תנועה וזמני קבלת משימות.
- הערכת זמני הגעה
בניית מודלי רגרסיה ורשתות עצביות לחיזוי זמן ההגעה המדויק לנקודת המסירה או האיסוף ברשת כבישים עירונית.
- מידול גרפי במרחב ובזמן
מחקר על רשתות גרף מרחביות-זמניות לחיזוי עומסי משלוחים ותנועה עירונית על פי רשת הכבישים וה־AOI.
איפה זה נופל
כל הנתונים מגיעים מחמש ערים ספציפיות בסין ומשקפים את מאפייני התנועה, הצפיפות ודפוסי השילוח המקומיים שם בלבד. המאגר אינו מכיל נתונים גאוגרפיים מישראל או ממדינות מערביות, כך שלא הייתי משתמש בו ישירות לחיזוי זמני הגעה של ציים מקומיים בלי כיול מחדש. בנוסף, הנתונים מתעדים פעילות של חצי שנה בלבד ואינם כוללים טקסט חופשי או כתובות אלא מזהים מספריים וקואורדינטות.
שאלות
נפוצות
האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?
כן, המאגר מוגדר תחת רישיון apache-2.0 שמתיר שימוש מסחרי מלא. עם זאת, יש להקפיד על מתן קרדיט מתאים ליוצרים ושמירה על תנאי הרישיון המקוריים בהפצה.
האם הנתונים רלוונטיים לחברות לוגיסטיקה שפועלות בישראל?
הנתונים מתאימים בעיקר לפיתוח ובדיקת ארכיטקטורות של אלגוריתמי ניתוב ו־ETA, אך הם נאספו בערים בסין. דפוסי התנועה, רשתות הכבישים וחלונות הזמן שונים מאוד מהמציאות הישראלית, ולכן אי אפשר להסתמך עליהם לכיול זמנים אמיתי בארץ.
באיזה פורמט שמורים הנתונים ואיך ניגשים אליהם?
הטבלאות של האיסוף והמסירה מגיעות כקובצי CSV פשוטים לפי ערים, בעוד נתוני מסלול ה־GPS שמורים כקובצי pickle דחוסים שנטענים בפייתון באמצעות pandas. המאגר פתוח להורדה ישירה ללא טופס בקשה.
איך טוענים
הקבצים שמורים במבנה של קובצי CSV נפרדים לכל עיר ותרחיש, לצד קובצי road-network וקובצי pickle דחוסים בסיומת xz שמכילים את מסלולי השליחים. אפשר לטעון את קובצי הפיקל ישירות באמצעות ספריית pandas. אין צורך באישור גישה ידני להורדה מהמאגר, אך שדות המיקום והזמנים כוללים קואורדינטות ברשת מקומית שמחייבות בדיקת תאימות לפני שמזינים אותם למודל.
from datasets import load_dataset
ds = load_dataset("Cainiao-AI/LaDe")הרישיון
המאגר מופץ תחת רישיון apache-2.0, שמתיר שימוש מסחרי, שינוי והפצה של הנתונים והקוד, לצד חובת ייחוס ליוצרים וצירוף עותק מהרישיון. מודלים שתאמנו על הבסיס הזה אינם מחויבים להיפתח בקוד פתוח.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים