LD-T3D
רץ בדפדפןVAST-AIרישיון לא דווח2024-03-25
הכלי מאפשר לחפש מודלים תלת ממדיים מתוך מאגר נתונים לפי תיאור טקסטואלי חופשי. הוא מיועד לחוקרים ולמפתחים שבוחנים מודלים של אחזור תלת ממד לפי טקסט.
- —הורדות בחודש
- 42לייקים
מה זה
אתם מקלידים שאילתה טקסטואלית באנגלית ובוחרים מאיזה היבטים לחפש את המודל, כמו מבט מקדימה, מאחור, מלמעלה או ייצוג תלת ממדי מלא. הממשק מציג גלריית תמונות בפורמט וובפי שמציגות את המודלים המתאימים ביותר שנמצאו במאגר לפי הדירוג שנקבע.
מאחורי הקלעים הקוד משתמש במודל Uni3D של BAAI ובמודל CLIP מסוג EVA02 של timm כדי לחלץ מאפיינים וקטוריים ולהשוות בין הטקסט לבין מאגר הנתונים LD-T3D של VAST-AI. בדוגמאות המוכנות מופיעים חיפושים כמו סופר מריו או גלידה עם דובדבן למעלה, ומקבלים עשר תוצאות מרונדרות מזוויות שונות. יש גם לשונית נוספת שמאפשרת לדפדף ישירות בתתי המאגרים לפי מזהה מספרי.
מתאים ל
- בדיקת איכות אחזור
השוואת ביצועי המודל Uni3D מול שאילתות טקסט שונות ובחינת התאמת התוצאות הוויזואליות.
- דפדוף במאגר הנתונים
צפייה במודלים וברינדורים השמורים במאגר LD-T3D לפי מזהה תת המאגר שבוחרים.
- איתור מראי מקום לתלת ממד
מציאת זוויות רינדור שונות של עצמים לפי תיאור מילולי מתוך המאגר הקיים.
איפה זה נופל
הבעיה המרכזית כרגע היא שהאפליקציה תקועה בשגיאת ריצה ולא עולה בכלל בדפדפן. מעבר לכך, היא לא מייצרת מודלים חדשים ולא מאפשרת להוריד קובצי תלת ממד אמיתיים אלא רק מציגה רינדורים כתמונות דו ממדיות. שאילתות טקסט ארוכות מדי מקפיצות אזהרה על ירידה בדיוק התוצאות, והממשק דורש לבחור לפחות מודאליות אחת כדי לפעול.
שאלות
נפוצות
האם השימוש באפליקציה עולה כסף?
הגישה לממשק באתר חינמית לגמרי ופתוחה לכולם. אין צורך להזין אמצעי תשלום ואין מדרגות מחיר.
מה קורה עם הטקסט שאני מקליד?
השאילתות שאתם שולחים מעובדות בזיכרון של השרת לצורך שליפת הווקטורים וההשוואה מול המאגר. הממשק לא כולל אפשרות להעלות קבצים פרטיים משלכם, ולכן אין סיכון של שמירת קבצים אישיים בענן.
האם אפשר להריץ את המערכת מקומית במחשב שלי?
הקוד בנוי בתוך סביבת דוקר ומסתמך על מאגרים ציבוריים בהאגינג פייס. כדי להריץ אותו אצלכם תצטרכו להוריד את הקוד, להתקין את התלויות ולהחזיק כרטיס מסך עם זיכרון משמעותי שיתמודד עם המודלים.
במה האפליקציה הזאת שונה מהרצת המודל Uni3D ישירות?
האפליקציה הזאת היא ממשק גרפי שמדגים אחזור ספציפי מתוך מאגר LD-T3D ולא מאפשרת סריקת אובייקטים חיצוניים. הרצה ישירה של המודל בקוד מאפשרת גמישות מלאה לעבוד עם כל קובץ תלת ממדי שתרצו.
איך משתמשים
בפועל אתם כותבים טקסט בשדה החיפוש, בוחרים מודאליות מתוך תיבות הסימון, קובעים בעזרת הסליידר כמה תוצאות להציג ולוחצים על כפתור החיפוש. אין צורך בהרשמה או התחברות כדי לגשת לממשק, אבל כרגע האפליקציה נמצאת במצב שגיאת ריצה ולכן אי אפשר להריץ חיפושים בפועל עד שהמפתחים יתקנו אותה. ברמת התשתית מוקצה לה מעבד גרפי A10G גדול, כך שברגע שהיא תחזור לעבוד, הפקת הווקטורים וחיפוש ההתאמות אמורים לקחת שניות בודדות.
הרישיון
הרישיון של המרחב לא דווח כלל במאגר. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצאות, ורצוי להיזהר מלהסתמך עליהם לצרכים שאינם מחקר אישי.