Depth-Anything-V2-Large
קוד פתוחdepth-anythingcc-by-nc-4.02024-06-13
המודל מחלץ מפות עומק מתמונה בודדת ברמת פירוט גבוהה. הוא רץ מהר בהרבה ממודלים מבוססי דיפיוז'ן ומספק יציבות טובה יותר מהגרסה הקודמת.
- 1.2 GBמשקל הקבצים
- 196,159הורדות בחודש
- 168לייקים
מה זה
הגרסה הזו אומנה על שילוב של 595 אלף תמונות סינתטיות עם תוויות ולמעלה מ־62 מיליון תמונות אמיתיות ללא תיוג. המטרה כאן היא הערכת עומק מתמונה יחידה בלי להסתמך על חיישני חומרה ייעודיים. בהשוואה לגרסה הראשונה בסדרה, הדגם הנוכחי מתמקד בפרטים עדינים יותר ומפגין עמידות גבוהה יותר במגוון סצנות.
מול חלופות שמבוססות על מודלי דיפיוז'ן כמו Marigold או Geowizard, הדגם הזה מהיר פי עשרה וקל משמעותית במשקל שלו. זה הופך אותו לבחירה מעשית יותר כשצריך לייצר מפות עומק בקצב סביר ולא רוצים לחכות שניות ארוכות לכל תמונה.
מתאים ל
- הערכת עומק לעריכת תמונה
יצירת מפת עומק מהירה כדי להפריד אובייקטים מהרקע או להוסיף טשטוש מלאכותי.
- מחקר וניסויי ראייה ממוחשבת
בדיקת אלגוריתמים תלת-ממדיים על בסיס מודל שאומן על 62 מיליון תמונות אמיתיות.
- אימון מודלים ייעודיים
שימוש במשקלים המאומנים כבסיס לביצוע fine-tuning למשימות עומק ספציפיות.
איפה זה נופל
הכרטיס מציג את השיפורים מול הדור הקודם ומול מודלי דיפיוז'ן, אך לא מפרט נתוני שגיאה מוחלטים או חולשות ספציפיות כמו התמודדות עם משטחים שקופים, השתקפויות או תנאי תאורה קיצוניים. מאחר ומדובר בהערכת עומק יחסית מתמונה בודדת ולא במדידת מרחק מטרית מוחלטת, אי אפשר להסתמך עליו למדידות הנדסיות מדויקות בלי כיול או אימות נוסף.
שאלות
נפוצות
האם אפשר להשתמש במודל הזה בתוך אפליקציה מסחרית?
לא. הרישיון שבו הוא מופץ אוסר במפורש על שימוש מסחרי מכל סוג. הוא מיועד לניסויים, מחקר ופיתוח פנימי בלבד.
איך הוא מתפקד בהשוואה למודלים שמבוססים על Stable Diffusion?
לפי נתוני הפיתוח הוא מהיר פי עשרה וקל מהם בהרבה. בנוסף, הוא מספק תוצאות יציבות יותר בלי לדרוש את כוח החישוב הכבד של תהליכי דיפיוז'ן.
איך מריצים
כדי להריץ אותו משתמשים בקוד המקור של depth-anything-v2 עם PyTorch ו־OpenCV, וטוענים את המשקלים של ארכיטקטורת vitl ששוקלים כ־1.2 גיגה-בייט. הטעינה מתבצעת ישירות לקובץ המשקלים המקומי ומריצים את פונקציית ההסקה על התמונה.
משקל של 1.2 גיגה-בייט מאפשר להריץ אותו בנוחות על כרטיס מסך ביתי ממוצע ואפילו לבדוק אותו על מעבד, אם כי לזמני ריצה סבירים עדיף GPU. אם אין לכם תשתית גרפית זמינה או שאתם צריכים רק בדיקה נקודתית, שליחה לשרת חיצוני חוסכת את התקנת התלויות וההורדה של המשקלים.
pip install -U huggingface_hub hf download depth-anything/Depth-Anything-V2-Large
הקבצים
3 קבצים במאגר, 1.2 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הרישיון הוא cc-by-nc-4.0, וזה אומר שאין אפשרות להשתמש בו לצרכים מסחריים. אפשר ללמוד ממנו, לעשות עליו מחקר אקדמי ולהריץ ניסויים פנימיים, אך אסור לשלב אותו במוצר שמייצר הכנסה או מוצע בתשלום. חברות שרוצות להוציא מוצר לשוק יצטרכו לחפש חלופה עם רישיון פתוח לעסקים.
- שינוי הקוד
- חובת ייחוס
- שימוש מסחרי: לא