stable-point-aware-3d — הדגמה
קוד פתוחstabilityaiother2024-12-28
הדגמה שמייצרת מודלים תלת ממדיים מתוך קלט ויזואלי ומיועדת למפתחים וחוקרים שרוצים לבחון את המודל של stabilityai. אין טעם לנסות להשתמש בה כרגע בדפדפן כי היא פשוט לא עובדת.
- 2Bפרמטרים
- 6.8 GBמשקל הקבצים
- —הורדות בחודש
- 470לייקים
מה זה
האפליקציה אמורה לקחת תמונה וליצור ממנה ייצוג תלת ממדי שמבוסס על ענן נקודות ומבנה מרחבי. מתחת למכסה המנוע רצים כמה רכיבים במקביל, כולל המודל הייעודי של החברה לצד מודלי הראייה הממוחשבת של מטא, dinov2 בגרסאות base ו־large, שמחלצים מאפיינים ויזואליים עמוקים מהתמונה כדי להבין את העומק והגאומטריה.
המטרה כאן היא לאפשר בדיקה של היכולת הזו ישירות בממשק gradio פשוט. עם זאת, הדף עצמו לא מציג כרגע גלריית תוצאות חיה או דוגמאות פעילות, ומפנה בעיקר לעמודי המחקר, לקוד המקור בגיטהאב ולדוח הטכני בארכייב.
מתאים ל
- הערכת יכולות המודל
קריאת הדוח הטכני ובדיקת הקישורים לקוד כדי להבין איך האלגוריתם מנתח גאומטריה.
- ניתוח ארכיטקטורה
בחינת השילוב בין dinov2 למודל התלת ממד לפרויקטים עצמאיים בתחום הראייה.
- הרצה מקומית עצמאית
מעבר למאגר בגיטהאב כדי להרים את הממשק באופן מקומי על חומרה משלכם.
איפה זה נופל
הבעיה המיידית היא שהאפליקציה במצב של שגיאה ולא נטענת, כך שאי אפשר לבדוק אותה בדפדפן. מעבר לכך, היא מוגבלת לחומרה של מעבד גרפי בודד שלא מתאים לעומסי עבודה כבדים או לעיבוד מהיר של אובייקטים מורכבים. מי שרוצה לבדוק את הביצועים האמיתיים של המודל יצטרך לפנות ישירות למאגר הקוד או לדוח הטכני.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה בחינם כרגע?
הגישה למרחב עצמו פתוחה וחינמית, אבל אי אפשר להפיק ממנו שום דבר כרגע. הדף מציג שגיאת בנייה ולא מציג ממשק עובד. אם המפתח יתקן את ההתקנה, השימוש הבסיסי ברשת אמור להיות ללא תשלום.
כמה זמן לוקח לייצר מודל תלת ממדי?
כרגע אי אפשר לייצר כלום בגלל תקלה בהרמת השרת. בעבודה תקינה על מעבד l4x1 תהליכים כאלה לוקחים בדרך כלל בין כמה עשרות שניות למספר דקות. זמני ההמתנה המדויקים תלויים בעומס על המערכת ובגודל הקלט.
האם כדאי להריץ את המודל באופן מקומי?
בהחלט, וזו כרגע הדרך היחידה לבדוק אותו בפועל. המפתחים צירפו קישורים לקוד המקור בגיטהאב ולמשקולות המודל בהאגינג פייס. תצטרכו מחשב עם כרטיס מסך חזק כדי להריץ את המודלים האלה אצלכם.
מה קורה לקבצים שמעלים לממשק?
הרישיון של המרחב לא צוין ולא ברור מה מדיניות שמירת הנתונים של השרת הספציפי. היות שמדובר בסביבה ציבורית שלא מוגדרת כרגע כפעילה, עדיף לא להעלות אליה חומרים רגישים או קבצים פרטיים. כדאי להתייחס לכל העלאה כחשופה לחלוטין.
איך מריצים
אין כאן שום כפתור שאפשר ללחוץ עליו כרגע כדי לקבל תוצאה, כי הדף תקוע בשגיאת בנייה ולא עלה כמו שצריך. במצב תקין הממשק מוגדר לרוץ על מאיץ l4x1 יחיד, מה שאמור לספק זמני עיבוד סבירים ביחס למודלים כבדים, אבל כל עוד השרת לא השלים את תהליך ההתקנה שום קובץ שתעלו לא יעובד.
pip install -U huggingface_hub hf download stabilityai/stable-point-aware-3d
הקבצים
6 קבצים במאגר, 6.8 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
הרישיון של המרחב לא דווח. המשמעות היא שאין הרשאה ברורה להשתמש בתוצרים באופן מסחרי, ומומלץ לבדוק את תנאי הרישיון הישירים של המודל והקוד בגיטהאב לפני שמעלים קבצים או בונים על זה משהו.