gaussian-city
רץ בדפדפןhzxieרישיון לא דווח2024-09-23
הדגמה זו מייצרת תמונות בודדות של נוף עירוני מנקודות מבט שונות. היא מיועדת לחוקרים ומפתחי תלת ממד שרוצים לראות תוצרי מודל של עיר גדולה.
- —הורדות בחודש
- 54לייקים
מה זה
אתם לא מעלים לכאן שום קובץ משלכם. הממשק מציג ארבעה סליידרים שקובעים את זווית המצלמה, הגובה שלה, המרחק והמיקום על פני המפה, ומוציא תמונה בודדת בפורמט ויזואלי רגיל.
מאחורי הקלעים רצה שיטה של Gaussian Splatting ליצירת ערים בלתי מוגבלות במרחב, המבוססת על מתווה הרחובות של ניו יורק. התוכנה נשענת על שילוב של המודלים PointTransformerV3 ו־CityDreamer כדי לעבד את המבנה המרחבי ולרנדר את הפרטים האורבניים לכדי תמונה סופית.
במקום לקבל קובץ תלת ממדי שאפשר לסובב בחופשיות או לייצא לתוכנות גרפיקה, מקבלים רק היטל דו ממדי מרונדר של אותה סצנה לפי הערכים שהזנתם בסליידרים.
מתאים ל
- בדיקת זוויות צילום בעיר
מזיזים את הסליידרים של המצלמה כדי לראות איך המודל מתמודד עם גבהים ומרחקים שונים על פני המפה.
- בחינת איכות הרינדור
מפיקים תמונות תקריב כדי לבחון את איכות הפרטים שמפיק מודל ה־Gaussian Splatting ביחס למבנים עירוניים.
- התרשמות ממחקר CVPR
צופים ביכולת של המודלים המובנים לעבד את הגאומטריה של ניו יורק בלי להתקין סביבת פיתוח מקומית.
איפה זה נופל
ההדגמה הזו מטעה אם בניתם על קובץ תלת ממד אמיתי. למרות שהמחקר עוסק בסצנות תלת ממדיות שלמות, הדמו בדפדפן מייצר רק תמונה סטטית בודדת בכל פעם בגלל מגבלות כוח מחשוב. בנוסף, אתם כבולים אך ורק לפריסת העיר ניו יורק ואי אפשר להזין מפות משלכם או לשנות את סגנון הבניינים מעבר למה שהוגדר מראש בקוד.
שאלות
נפוצות
האם השימוש בהדגמה עולה כסף?
השימוש בדפדפן פתוח לחלוטין וללא תשלום. המשאבים מוקצים דרך חומרת שיתוף ציבורית, ולכן אין צורך להזין אמצעי תשלום כדי להריץ את הממשק.
האם אפשר לייצא מודל תלת ממד לשימוש בתוכנות אחרות?
לא דרך הדפדפן הזה. הממשק מפיק תמונה בודדת בלבד ולא קובץ תלת ממדי כמו אובייקט או ענן נקודות, כך שאי אפשר לייבא את העיר לתוכנות מידול.
כמה זמן לוקח לכל תמונה להתקבל?
הרינדור עצמו מתבצע בתוך שניות בודדות. אם השרת היה במצב שינה, ייתכן שתמתינו רגע קצר נוסף בזמן שהמעבד הגרפי נטען לפעולה.
האם אפשר להריץ את הפרויקט המלא באופן מקומי?
כן, הקוד המלא פורסם עבור כנס CVPR 2025 וזמין במאגר הפרויקט. הרצה מלאה במחשב שלכם תדרוש חומרה מתאימה, ותאפשר להפיק יותר מאשר תמונה בודדת.
איך משתמשים
גוררים את ארבעת הסליידרים כדי לכוון את גובה המצלמה, המרחק, הזווית והמיקום במפה, ולוחצים על כפתור ההרצה כדי לייצר את התמונה. השרת מקצה מעבד גרפי מסוג zero-a10g לפי דרישה, כך שזמן הרינדור לוקח שניות בודדות ברגע שהחומרה מתעוררת. אין צורך לפתוח חשבון או להתחבר למערכת כדי לנסות את ההדגמה.
הרישיון
הרישיון של הפרויקט לא דווח בעמוד. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בפלט שנוצר. לא מומלץ להסתמך על התוצרים לפרויקטים מסחריים בלי לבדוק קודם את תנאי הקוד במאגר המקורי.