map-anything-apache
קוד פתוחfacebookapache-2.02025-09-08
טרנספורמר של פייסבוק שבונה גיאומטריה תלת-ממדית מדויקת מתמונות בריצת feed-forward אחת. הוא פותר מעל 12 משימות שחזור שונות בלי להחליף ארכיטקטורה.
- 1.2Bפרמטרים
- 4.6 GBמשקל הקבצים
- 41,448הורדות בחודש
- 40לייקים
מה זה
המודל הזה לוקח תמונות בכמה פורמטים שונים ומוציא מהן גיאומטריה תלת-ממדית במטרים, ישירות וללא אופטימיזציה ארוכה בכל ריצה. במקום להחזיק מודל ייעודי להערכת עומק מתמונה בודדת, כלי נפרד לחיבור זוויות צילום וכלי שלישי להשלמת עומק, הוא מאחד את כולם תחת רשת אחת של 1.2 מיליארד פרמטרים.
הגישה הזו חוסכת שרשור של ספריות שחזור קלאסיות שנוטות להישבר כשזווית הצילום משתנה או כשיש מעט מדי תמונות. הוא מבצע משימות כמו Structure from Motion מרובה תמונות, סטריאו, ורישום מרחבי, כך שאפשר לתת לו קלטים שונים ולקבל מבנה עקבי באותן יחידות מידה.
מתאים ל
- שחזור סביבה מרובת תמונות
הוא מריץ Structure from Motion ומחבר זוויות צילום שונות למודל גיאומטרי יחיד בריצה ישירה.
- הערכת עומק מתמונה בודדת
הוא מייצר מפת עומק במטרים מתוך פריים יחיד בלי צורך ברצף וידאו מקדים.
- השלמת פערי סריקה
הוא לוקח מדידות עומק חלקיות ומשלים את המשטחים החסרים על בסיס התמונה.
איפה זה נופל
הכרטיס מציג את יכולות המודל אך לא כולל מדדי שגיאה כמותיים או זמני ריצה מדויקים, ולכן אי אפשר לדעת מראש איך הוא מתמודד עם תנאי תאורה קשים, משטחים מבריקים או חוסר במרקם. מודלים שמבצעים שחזור ישיר בבת אחת עלולים לפספס פרטים גיאומטריים דקים בהשוואה לאלגוריתמים שמבצעים אופטימיזציה מקומית כבדה, וצריך לבדוק אותו על התמונות שלכם לפני שמסתמכים על המידות שהוא מייצר.
שאלות
נפוצות
האם אפשר להשתמש במודל הזה ישירות במוצר מסחרי?
כן, זו גרסת האפאצ'י 2.0 שמתירה שימוש מסחרי חופשי, בתנאי שמשאירים את הצהרת הרישיון המקורית. אין שום דרישה לשתף את הקוד של המוצר שבו תטמיעו אותו.
מה החומרה המינימלית שנחוצה כדי לעבוד איתו?
הקבצים שוקלים 4.6 גיגה-בייט, ולכן כרטיס מסך סטנדרטי עם 8 עד 12 גיגה-בייט של זיכרון יספיק להסקה. כדי לעבד תמונות ברזולוציה גבוהה במיוחד ייתכן שתצטרכו זיכרון רחב יותר כדי למנוע קריסות.
איך מריצים
המשקל הכולל של הקבצים עומד על 4.6 גיגה-בייט, כך שמדובר במודל קל יחסית שרץ בקלות על כרטיס מסך בודד עם 8 עד 12 גיגה-בייט זיכרון. הקוד המלא מנוהל בריפו הגיטהאב של פייסבוק, ואין צורך בתשתיות ענן מורכבות רק כדי להרים אותו.
אם אתם צריכים שחזור מזדמן ולא רוצים לתחזק שרת עם מעבד גרפי פעיל, פתרון מנוהל עדיף. לעומת זאת, אם אתם מעבדים רצפי תמונות באופן קבוע בתוך מוצר, הגודל הזה מצדיק לגמרי הרצה מקומית בלי תלות ברשת.
pip install -U huggingface_hub hf download facebook/map-anything-apache
הקבצים
4 קבצים במאגר, 4.6 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
המודל משוחרר תחת רישיון אפאצ'י 2.0. הרישיון הזה מתיר שימוש מסחרי מלא, שינוי של הקוד והמשקולות והפצה בתוך מוצרים סגורים. התנאי המרכזי הוא שמירה על הודעת זכויות היוצרים ומסמך הרישיון המקורי, בלי חובה לפתוח את הקוד שלכם.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש
- שימוש בפטנטים