חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
S

sapiens-pose

רץ בדפדפן

facebookcc-by-nc-4.02024-08-30

  • gradio

העלאת תמונה של אדם כדי לחלץ את מנח הגוף שלו בפירוט של שלד ונקודות ציון. פייסבוק בנו את זה לחוקרים ומפתחים שרוצים לבדוק את המודל ישירות בדפדפן.

  • —הורדות בחודש
  • 59לייקים

מה זה

אתם מעלים תמונת סטילס ומקבלים חזרה תמונה עם סימון שלד מפורט שנקרא Pose-308, לצד קובץ JSON שמכיל את הקואורדינטות המדויקות של נקודות המפתח. בקוד יש שימוש במודל זיהוי אובייקטים מבוסס mmdet שמאתר קודם את האדם בפריים, ורק אז רשת הראייה מעבדת את המנח שלו.

בממשק עצמו אפשר לבחור את גרסת המודל מתוך תפריט נפתח ולקבוע סף ביטחון לזיהוי הנקודות. יש שם גם גלריה מובנית של 14 דוגמאות מוכנות מראש לבדיקה מהירה, בלי להעלות קבצים משלכם.

מתאים ל

  • בדיקת איכות שלדי מנח

    בחינה ויזואלית של דיוק נקודות הציון על גבי תמונות מורכבות.

  • חילוץ קואורדינטות מנח

    הורדת קובץ נתוני שלד בפורמט מסודר לצורך מחקר והשוואת אלגוריתמים.

  • השוואת גדלי מודלים

    מעבר בין גרסאות שונות של המודל בתפריט כדי לראות הבדלי זיהוי.

איפה זה נופל

ההדגמה הזו מיועדת לתמונות בודדות בלבד ולא תעזור לכם אם אתם צריכים ניתוח של וידאו בזמן אמת. מעבר לכך, היא לא זמינה כרגע לשימוש ישיר בענן כי העמוד מושהה לחלוטין. אם המודל לא מזהה אדם בתמונה דרך שלב הגילוי הראשוני, הוא פשוט לא ייצר שום מנח גוף, ואין כאן אפשרות לתקן ידנית נקודות שפוספסו.

שאלות
נפוצות

האם אפשר להשתמש בהדגמה הזאת כרגע?

לא באופן ישיר דרך הדפדפן. העמוד מוגדר במצב מושהה על גבי הפלטפורמה. כדי להריץ את הממשק תצטרכו להעתיק את הקוד ולהפעיל אותו בסביבה משלכם.

האם השירות הזה עולה כסף?

הגישה להדגמה ולעמוד היא בחינם ואינה דורשת תשלום. עם זאת, הרישיון של המודל אינו מסחרי ומוגבל לשימוש פרטי או מחקרי. כל שימוש עסקי בתוצרים חורג מתנאי הרישיון.

מה קורה לתמונות שמעלים לממשק?

התמונות נשלחות לשרת שמריץ את קוד הפייתון ומעובדות כקבצים זמניים לצורך החישוב. הן אינן מתפרסמות באופן פומבי באתר. עם זאת, אין כאן התחייבות רשמית לגבי שמירת נתונים לטווח ארוך.

האם אפשר להריץ את המערכת על המחשב האישי?

כן, הקוד כתוב בפייתון ומשתמש בספריות סטנדרטיות כמו PyTorch וגרדיו. תצטרכו להתקין את התלויות, להוריד את המשקולות ולהחזיק מעבד גרפי מתאים כדי לקבל זמני ריצה סבירים.

איך משתמשים

לוחצים על אזור ההעלאה, בוחרים תמונה, קובעים מודל וסף זיהוי, ולוחצים על כפתור ההרצה. מתקבלים תצוגה חזותית וקובץ נתונים להורדה מיידית.

בפועל, כרגע המרחב נמצא במצב מושהה ולא פעיל בדפדפן. בנוסף, ההגדרה הטכנית שלו מוגדרת על מעבד בסיסי בלבד ומשתמשת בספריית spaces של האגינג פייס. גם אם הוא היה פועל, חישוב כזה על מעבד רגיל ללא מאיץ גרפי ייעודי היה לוקח זמן רב ומייצר זמני המתנה ארוכים לכל תמונה.

הרישיון

הקוד וההדגמה מפורסמים תחת רישיון cc-by-nc-4.0. הרישיון הזה מתיר שימוש למטרות מחקר והתנסות אישית בלבד, ואוסר כל שימוש מסחרי במודל או בתוצרים שלו.

  • שינוי הקוד
  • חובת ייחוס
  • שימוש מסחרי: לא

הרישיון המלא ב־Hugging Face ↗