חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
L

Lotus_Normal

רץ בדפדפן

haodongliרישיון לא דווח2024-10-05

  • gradio

הכלי מייצר מפות נורמלים מתמונות דו ממדיות עבור מפתחי תלת ממד ויוצרי הדמיות. אתם מעלים תמונה ומקבלים הערכת כיווני משטחים מדויקת שמתבססת על מודלי דיפוזיה.

  • —הורדות בחודש
  • 101לייקים

מה זה

אתם מעלים תמונה בודדת, מגדירים מספר סיד אם רוצים שליטה בתוצאה, ומקבלים תצוגה של מפת נורמלים לצד המקור באמצעות רכיב השוואה ויזואלי. הממשק מציג דוגמאות מובנות שאפשר לבחון מיד כדי לראות איך הוא מתמודד עם זוויות שונות, אבל הוא לא שומר את התוצאות מראש במטמון.

מאחורי הקלעים רץ המודל jingheya/lotus-normal-d-v1-0, שנשען על ארכיטקטורות מבוססות Stable Diffusion. הקוד כולל פונקציות עיבוד מתקדמות מספריית diffusers ופניות לפונקציות lotus, ומטרתו לחלץ את הגאומטריה ושיפועי המשטח מתוך פיקסלים שטוחים.

מתאים ל

  • חילוץ טקסטורות לתלת ממד

    יצירת מפת נורמלים מתמונת רפרנס כדי להלביש פרטי שטח על מודל גאומטרי בלי לפסל הכל ידנית.

  • בדיקת איכות למודל לוטוס

    בחינה מהירה של ביצועי משפחת מודלי lotus-normal ישירות בדפדפן לפני שמורידים את המשקלים למחשב.

  • הכנת חומרים להדמיות

    המרת צילומים של משטחים קיימים למפות כיווני שטח שמתאימות למנועי רינדור בזמן אמת.

איפה זה נופל

ההדגמה הזאת ממוקדת אך ורק בנורמלים, למרות שבקוד מקושרים גם מודלים של עומק מאותה סדרה. בנוסף, מודלי דיפוזיה נוטים לעיתים להחליק פרטים זעירים או לטעות בבליטות עדינות במרקמים מורכבים. בגלל שהדוגמאות אינן נטענות מראש, אי אפשר לקבל תוצאה מיידית בלי להריץ את השרת, כך שכדאי לבחון תמונות עם תאורה קשה לפני שבונים על הכלי בפרויקט פעיל.

שאלות
נפוצות

האם הכלי עולה כסף?

השימוש בממשק הזה הוא חינמי לגמרי דרך הדפדפן. אתם לא צריכים לשלם על זמן הריצה של המעבד הגרפי.

למה לוקח לו זמן להתחיל לעבוד?

האפליקציה נמצאת במצב שינה כברירת מחדל. כשאתם ניגשים אליה, לוקח לשרת דקה או שתיים להעלות את החומרה ואת המודל מחדש.

האם אפשר להריץ את הקוד באופן עצמאי?

כן, הקוד מפנה למאגר בגיטהאב ולמשקלים של jingheya. אם יש לכם כרטיס מסך מתאים, אתם יכולים להוריד את הקבצים ולהריץ אותם מקומית.

האם הכלי שומר את התמונות שמועלות אליו?

הקוד משתמש בתיקיות זמניות בשרת לצורך עיבוד התמונה, אבל הרישיון ומדיניות הפרטיות לא דווחו. לא הייתי מעלה לשם חומרים רגישים.

איך משתמשים

נכנסים לעמוד, גוררים תמונה לשדה הקלט, מזינים סיד במידת הצורך ולוחצים על כפתור השליחה. העיבוד עצמו יושב על חומרת zero-a10g שמוקצית לפי דרישה, מה שאומר שהחישוב בפועל מהיר יחסית. עם זאת, המרחב נמצא במצב שינה, כך שבהפעלה הראשונה תצטרכו להמתין שהשרת יתעורר ויטען את המודל לזיכרון לפני שתראו תוצאה כלשהי.

הרישיון

הרישיון של המרחב לא דווח בדף הפרויקט. המשמעות היא שאין הרשאה ברורה וכתובה לשימוש מסחרי בקוד או בתוצרים ישירות מהעמוד הזה, ולא ידוע מה נעשה עם התמונות שמעלים לשרת.

הרישיון המלא ב־Hugging Face ↗