חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
C

city-dreamer

רץ בדפדפן

hzxieרישיון לא דווח2024-03-02

  • gradio

הדגמה שמייצרת תמונה יחידה של נוף עירוני לפי זוויות מצלמה שתבחרו. היא מיועדת לחוקרים ולסקרנים שרוצים לראות איך מודל תלת ממד מתרגם פריסת עיר למראה ריאליסטי.

  • —הורדות בחודש
  • 44לייקים

מה זה

הכלי מייצר תמונה אחת של עיר במבט ממעוף הציפור. אתם לא מעלים קבצים משלכם, אלא קובעים ארבעה ערכים מספריים: רדיוס המצלמה במטרים, הגובה שלה, זווית הסיבוב שלה, ומיקום מרכז המפה בפיקסלים על גבי פריסה מובנית של העיר ניו יורק.

מאחורי הקלעים רצים המודלים SceneDreamer ו־CityDreamer, שמפרקים את המרחב לשכבות ומנסים לבנות סצנה עקבית. המטרה המקורית של המחקר היא ליצור ערים תלת ממדיות אינסופיות, אבל כאן הממשק מקובע למפה אחת ספציפית ומפיק פלט שטוח לחלוטין שמייצג רק נקודת מבט בודדת.

מתאים ל

  • בדיקת זוויות תצפית

    צפייה באיור נוף עירוני מנקודות גובה וסיבוב שונות לפי פריסת רחובות נתונה.

  • הערכת ריאליזם ויזואלי

    בחינת רמת הפירוט של מבנים וטקסטורות שמפיק המודל מתוך מפת פריסה קיימת.

  • התרשמות ממחקר CVPR

    בדיקה מהירה של יכולות הפרויקט בדפדפן בלי צורך להוריד משקלים ולהרים סביבה מקומית.

איפה זה נופל

ההדגמה הזו מוגבלת מאוד בהשוואה למה שהמחקר מציג. היא לא מאפשרת לשוטט בחופשיות בעיר, לא מפיקה מודל תלת ממד שניתן לייצא, ולא נותנת לבחור עיר אחרת מלבד ניו יורק. מי שמצפה לקבל קובץ גיאומטרי או רצף וידאו יתאכזב, כי כל מה שיוצא כאן זה קובץ תמונה בודד.

שאלות
נפוצות

האם השימוש בהדגמה עולה כסף?

לא. ההרצה בדפדפן פתוחה בחינם לגמרי ולא דורשת הזנת פרטי תשלום או הרשמה מראש.

האם המידע והקבצים שלי נשמרים שם?

אתם לא מעלים קבצים חיצוניים לכלי אלא רק משנים ערכי סליידרים. בהתאם לכך, אין פה שמירה של מידע אישי או קבצים פרטיים שלכם.

במה ההדגמה הזו שונה מהפרויקט המלא?

בגלל מגבלות חומרה באתר, ההדגמה מייצרת רק תמונה דו ממדית יחידה של ניו יורק. הפרויקט המקורי בגיטהאב מאפשר לייצר עיר תלת ממדית אינסופית ולנוע בתוכה.

האם אפשר להריץ את הכלי על המחשב שלי?

כן. הקוד וההסברים להרצה מקומית, כולל ההדגמה האינטראקטיבית המלאה, זמינים בעמוד הגיטהאב של הפרויקט.

איך משתמשים

גוררים את ארבעת הסליידרים כדי לכוון את נקודת המבט ולוחצים על כפתור ההרצה. העיבוד רץ על מעבד גרפי מסוג A10G דרך תשתית ZeroGPU של האתר, שמשתפת משאבים בין משתמשים. אין צורך לפתוח חשבון או להתחבר, אך בגלל הקצאת המשאבים הדינמית תיתכן המתנה קצרה בתור לפני שהתמונה תופיע.

הרישיון

הרישיון של היישום לא דווח במאגר. ללא רישיון שימוש מפורש, אין היתר ברור להשתמש בתמונות שנוצרות לצרכים מסחריים, ומוטב להתייחס לתוצרים ככאלה שמיועדים לבדיקה מחקרית ולהתרשמות אישית בלבד.

הרישיון המלא ב־Hugging Face ↗