360PanoImage

מה זה

אתם מקלידים פרומפט טקסטואלי באנגלית שמגדיר את הסביבה, ומקבלים תמונת פנורמה רחבה שמוצגת גם בתצוגת תמונה שטוחה וגם בנגן פנורמי אינטראקטיבי המאפשר סיבוב במרחב. יש אפשרות לסמן תיבת שדרוג רזולוציה שמגדילה את התוצאה לגודל של 6144 על 3072 פיקסלים.

מאחורי הקלעים רץ המודל sd-t2i-360panoimage של archerfmy0831, שמתבסס על Stable Diffusion 1.5 בשילוב מודל CLIP של OpenAI לעיבוד הטקסט. המערך מחבר בין טכניקות צינור יצירת התמונות לבין רכיב Pannellum המובנה בגרדיו כדי לאפשר בדיקה מיידית של החיבורים בקצוות הסביבה.

מתאים ל

• רקעי סביבה למשחקים

  יצירה זריזה של תמונות שמיים ונוף עוטפות לשימוש במנועי תלת-ממד.

• הדמיות אדריכליות מוקדמות

  בדיקת כיווני תאורה ואווירה פנורמיים מחלונות עוד לפני תחילת המידול.

• תצוגות מציאות מדומה

  הפקת סביבות פשוטות לצפייה במשקפי VR ישירות מתיאור טקסט חופשי.

איפה זה נופל

המערכת מבוססת על שלד ישן יחסית של Stable Diffusion 1.5, כך שרמת הפירוט הבסיסית עלולה לאכזב ביחס למודלים מודרניים. בנוסף, אין אפשרות להעלות תמונה קיימת כדי להרחיב אותה לפנורמה, והשליטה מוגבלת לטקסט ולמתג רזולוציה בודד בלי פרמטרים של שליליות או כיוונון צעדים.

איך משתמשים

כותבים הנחיה בתיבת הטקסט, בוחרים אם לסמן את תיבת ה־Upscale ולוחצים על כפתור Generate Panorama. אין צורך בהרשמה או התחברות לחשבון. ההרצה מתבצעת על מאיץ מסוג zero-a10g, מה שאומר שהעיבוד הבסיסי מהיר, אך אם מפעילים את הגדלת הרזולוציה הממשק עצמו מזהיר שהתהליך ייקח כשישים שניות נוספות.

הרישיון

הקוד מופץ תחת רישיון apache-2.0 המאפשר שימוש נרחב, כולל התאמות ושימוש מסחרי, אך חלה חובת מתן קרדיט לפרויקט המקור כפי שמצוין בממשק. סטטוס הזכויות על התמונות הנוצרות תלוי ברישיונות הבסיס של מודל המקור.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗