GPT
L

Lotus_Depth

רץ בדפדפן

haodonglimit2024-09-22

  • gradio

הדגמה שמעריכה מפות עומק מתמונות ומסרטוני וידאו. מתאימה למי שבונה מודלים בתלת-ממד או חוקר ראייה ממוחשבת ורוצה לבדוק את התוצאות בלי להגדיר סביבת עבודה מקומית.

  • הורדות בחודש
  • 80לייקים

מה זה

אתם מעלים תמונת סטילס או קובץ וידאו, קובעים מספר סיד לקבלת תוצאה אקראית או שחזור מדויק, ומקבלים מפת עומק. בתמונות התצוגה מבוססת על רכיב השוואה עם סליידר שמאפשר לבחון את המקור מול הפלט, ובווידאו מקבלים שני נגנים נפרדים שמציגים את התוצאות משתי גרסאות שונות של המודל.

מאחורי הקלעים הקוד משתמש במודלים ייעודיים של Lotus, לצד תשתיות של דיפיוז'ן המבוססות על משפחת סטייבל דיפיוז'ן המקורית. המערכת מחשבת מפות עומק ונורמלים בגרסאות ייעודיות, ומאפשרת להשוות ישירות בין תוצרי הוריאנטים השונים על גבי אותם נתונים. בממשק ישנן דוגמאות מובנות לתמונות ולווידאו שמוגדרות ללא שמירה מראש בזיכרון המטמון, כך שכל בחירה בדוגמה מריצה את החישוב בזמן אמת.

מתאים ל

  • הערכת עומק לתמונות

    העלאת תמונת סטילס וקבלת מפת עומק מדויקת להשוואה נוחה מול המקור באמצעות סליידר.

  • הפקת עומק מווידאו

    עיבוד קובץ וידאו והפקת שתי גרסאות עומק שונות במקביל לבחינת רציפות התנועה.

  • בדיקת המודל לפני הטמעה

    בחינת יכולות האלגוריתם של Lotus על קבצים פרטיים בדפדפן בלי צורך בהתקנה מקומית של ספריות.

איפה זה נופל

הדוגמאות בעמוד לא נשמרו מראש במטמון, ולכן בדיקה שלהן דורשת זמן חישוב מלא. בעבודה עם וידאו אתם מקבלים שני פלטים במקביל בלי שליטה עדינה על פרמטרים מתקדמים מעבר לסיד. בנוסף, חומרת שיתוף עלולה לנתק הרצות של סרטונים כבדים אם העיבוד חורג ממכסת הזמן שהוקצתה.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

לא, הגישה להדגמה בדפדפן פתוחה לגמרי ללא תשלום. אין צורך להזין אמצעי תשלום ואין דרישה לפתוח חשבון כדי להעלות קבצים. הריצה מתבססת על משאבים שיתופיים שמוקצים לממשק.

כמה זמן לוקח לכל קובץ להתעבד?

העיבוד מתבצע על גבי מאיץ גרפי מדגם A10G, כך שתמונות סטילס מסתיימות לרוב תוך שניות ספורות. בעיבוד סרטוני וידאו זמן הריצה מתארך בהתאם לאורך הקובץ וכמות הפריימים. במקרים של עומס ייתכן שתמתינו זמן קצר בתור להקצאת המעבד.

האם אפשר להריץ את זה באופן מקומי במחשב שלי?

כן, קוד המקור זמין תחת רישיון MIT בעמוד של הפרויקט. המשמעות היא שאתם יכולים להוריד את הקוד, להתקין את התלויות ולהריץ את המודל ישירות על מחשב עם מעבד גרפי מתאים. זה פתרון עדיף אם אתם מעבדים כמות גדולה של סרטונים.

מה קורה לקבצים שאני מעלה לממשק?

הקבצים מועברים לעיבוד זמני על גבי השרת שמארח את האפליקציה. הקוד שומר אותם בתיקייה זמנית לצורך ביצוע פעולת המודל והצגת הפלט בדפדפן. לא כדאי להעלות לשם חומרים סודיים או תמונות פרטיות שאינכם רוצים שייחשפו ברשת.

איך משתמשים

נכנסים לעמוד, בוחרים בלשונית תמונה או וידאו, מעלים קובץ ולוחצים על כפתור השליחה. אין צורך בהרשמה או התחברות לחשבון. ההרצה מתבצעת על מאיץ גרפי מסוג A10G שמוקצה לפי דרישה דרך זירו ג'יפיאו, מה שאומר שהעיבוד עצמו מהיר יחסית אבל ייתכן שתמתינו רגע לתור או להקצאת החומרה.

הרישיון

הפרויקט מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי, שינוי והפצה כולל לצרכים מסחריים. לגבי הקבצים שאתם מעלים, הם מעובדים על שרתי השירות שבו האפליקציה מאוחסנת, ולכן לא מומלץ להעלות מידע רגיש.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗