geowizard
רץ בדפדפןlemonaddieרישיון לא דווח2024-03-18
הכלי מפיק מפות עומק ונורמלים מתוך תמונה בודדת שאתם מעלים בדפדפן. הוא מתאים ליוצרי תלת-ממד, חוקרים ואמנים שרוצים לחלץ מבנה גאומטרי בלי לבנות מודל שלם בעצמם.
- —הורדות בחודש
- 125לייקים
מה זה
אתם מעלים תמונה בפורמט צבעוני או שקוף דרך הדפדפן, והמערכת מוציאה שני פלטים נפרדים של אותה סצנה: מפת עומק שמראה מה קרוב ומה רחוק, ומפת נורמלים שמציגה את זווית המשטחים בחלל.
מאחורי הממשק רצים מודלים של דיפוזיה, ביניהם צינור העבודה של GeoWizard עצמו ורכיבים מבוססי PixArt-alpha, לצד VAE, מקודד תמונה של CLIP ומודל UNet. הם מנתחים את הפיקסלים ומנסים להסיק את הגאומטריה התלת-ממדית שהייתה יוצרת את התמונה הזו.
הממשק כולל גלריית דוגמאות מוכנות שמאפשרת לבחון תוצאות בלי להעלות קבצים אישיים מיד בהתחלה. בהגדרות המתקדמות אפשר לבחור תחום, לשנות את כמות צעדי הניקוי, לקבוע את רזולוציית העיבוד, לשלוט בגודל האנסמבל ולהזין סיד ידני כדי לשחזר תוצאות.
מתאים ל
- חילוץ עומק להדמיות
יצירת מפת עומק מתוך תצלום קיים לצורך הוספת שכבות תלת-ממד, אפקטים של מרחק או עריכת פוקוס בתוכנות עריכה.
- הפקת מפות נורמלים
תרגום תמונות של טקסטורות למפות נורמלים שמתאימות לשימוש מיידי במנועי משחקים או תוכנות תלת-ממד.
- בדיקת מבנה גאומטרי
ניתוח מהיר של זוויות משטח בסצנה בודדת עבור מחקר בראייה ממוחשבת בלי להפעיל סורק ייעודי.
איפה זה נופל
הקוד לא מבצע שמירה מובנית של הדוגמאות בזיכרון מטמון, ולכן בדיקת דוגמה מוכנה מריצה את החישוב מחדש בדיוק כמו תמונה פרטית שלכם. אם תבחרו אנסמבל גדול או רזולוציה גבוהה מדי בהגדרות, זמן הריצה על החומרה השיתופית יתארך משמעותית. הכלי מעריך גאומטריה מתמונה שטוחה, כך שמשטחים מוסתרים, השתקפויות מורכבות ותאורה חריגה עלולים להניב מפות מעוותות.
שאלות
נפוצות
האם השימוש בחינם?
כן, הממשק פתוח לגישה ישירה בדפדפן ואינו דורש תשלום. השימוש נשען על חומרה שיתופית של הרשת, ולכן ייתכנו הגבלות זמניות על משך הריצה הרציף אם העומס הכללי עולה.
כמה זמן לוקח לייצר תוצאה?
ברוב המקרים מדובר במספר שניות עד חצי דקה, הודות למאיץ A10G שמקצה משאבים לפי דרישה. הזמן בפועל מושפע מאוד מכמות צעדי הדיפוזיה וגודל האנסמבל שתבחרו בהגדרות המתקדמות.
מה קורה עם התמונות שמעלים?
התמונות נשלחות לשרת שמריץ את המודל כדי לבצע את החישוב ולהחזיר את הפלט. היות ומדובר במרחב ציבורי שלא מפרט מדיניות שמירה, עדיף לא להעלות חומרים רגישים או סודיים.
האם אפשר להריץ את זה על המחשב?
כן, הקוד הציבורי מבוסס על ספריות פתוחות כמו diffusers ו־gradio, והמשקלים של GeoWizard זמינים להורדה. כדי להריץ את הצינור הזה מקומית באופן חלק תצטרכו מחשב עם כרטיס מסך מתאים וסביבת פייתון מוגדרת.
איך משתמשים
גוררים תמונה לחלון הקלט, או בוחרים אחת מתוך עמוד הדוגמאות, ולוחצים על Generate. העיבוד רץ על מאיץ גרפי ייעודי מסוג A10G דרך תשתית ZeroGPU, מה שמקצר את זמן ההמתנה אבל תלוי בזמינות המשאבים המשותפים באותו רגע. לא צריך להירשם או להתחבר בשביל להריץ בדיקה בסיסית.
הרישיון
הרישיון של המרחב לא דווח בדף המקורי. המשמעות היא שאין הרשאה ברורה מראש לגבי שימוש מסחרי בתוצרים או שילוב של הקוד במערכות אחרות. אם אתם מעלים תמונות רגישות, קחו בחשבון שהן מעובדות בשרת ציבורי מרוחק.