חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
V

vgg_heads

רץ בדפדפן

okupyncc-by-nc-4.02024-07-26

  • gradio

הכלי מזהה ראשים אנושיים בתמונה בודדת ובונה להם מודל תלת ממדי בצעד אחד. הוא מיועד למי שצריך חילוץ מהיר של נקודות ציון, תיחום ראשים או תנוחת ראש עבור אנימציה ומשחקים.

  • —הורדות בחודש
  • 58לייקים

מה זה

אתם מעלים תמונת פנים או גוף ובוחרים באחת מחמש שיטות תצוגה: זיהוי מלא, תיחום ראשים בלבד, נקודות ציון של הפנים, רשת תלת ממדית של הראש, או תנוחת הראש בחלל. הפלט שחוזר הוא התמונה המקורית שעליה מולבשות התוצאות שבחרתם.

מאחורי הקלעים פועל מודל שפותח על בסיס VGGHeads, מאגר נתונים סינתטי רחב היקף למידול ראשי אדם בתלת ממד. המודל אומן על מידע סינתטי מלא כדי להגיע לשחזור מדויק של פנים ורשתות ראש בעולם האמיתי, בלי להפריד בין שלב הזיהוי לשלב השחזור התלת ממדי.

מתאים ל

  • הערכת תנוחת ראש

    זיהוי זווית וכיוון הראש בתמונות דו ממדיות עבור פרויקטים של מעקב מבט או בקרת ממשק.

  • חילוץ נקודות ציון בפנים

    איתור תווי פנים מדויקים בתמונה בודדת לצורך ניתוח הבעות או עיבוד תמונה ממוקד.

  • שחזור רשת תלת ממדית

    יצירת רשת ראש מלאה מתמונת סטילס כדי לבחון התאמה של מודלים לאוואטרים או משחקים.

איפה זה נופל

הבעיה המיידית היא שההדגמה שבורה ולא מחזירה תמונות עקב שגיאת הרצה בשרת. מעבר לכך, הממשק מחזיר רק תמונה מעובדת ומצוירת ולא קובץ תלת ממדי גולמי כמו OBJ שתוכלו לייצא לתוכנת תלת ממד. מי שבונה על שילוב ישיר במנועי משחקים יצטרך לפנות לקוד המקורי ולא יוכל להסתפק בהדגמה הזו.

שאלות
נפוצות

האם הכלי עובד עכשיו בדפדפן?

כרגע לא, המערכת מדווחת על RUNTIME_ERROR בשרת. עד שהיוצר יתקן את הקוד או את התלויות, אי אפשר להעלות תמונה ולקבל פלט ישירות בעמוד.

האם השימוש פתוח בחינם?

כן, הגישה לממשק באתר אינה עולה כסף ואינה דורשת כרטיס אשראי. עם זאת, השימוש מוגבל למטרות לא מסחריות בלבד בגלל תנאי הרישיון.

האם אפשר להריץ את המודל על המחשב?

הקוד בנוי על פייתון ומודול בשם head_detector עם ממשק Gradio. אם תורידו את הקבצים ותתקינו את הספריות המתאימות, תוכלו להריץ אותו עצמאית במחשב עם חומרה מתאימה.

מה קורה לתמונות שמעלים לממשק?

התמונות מעובדות בזיכרון של שרת ההדגמה ומקבלות מזהה ייחודי זמני לפי הקוד. מאחר שמדובר בהדגמה ציבורית ברשת, לא כדאי להעלות אליה תמונות רגישות או פרטיות.

איך משתמשים

גוררים תמונה לממשק, מסמנים ברדיו את סוג התצוגה הרצוי ולוחצים להרצה. הכלי מוגדר לרוץ על מאיץ t4-small ללא צורך בהרשמה או התחברות. עם זאת, בעמוד הפעיל מדווחת כרגע שגיאת הרצה (RUNTIME_ERROR), כך שהממשק הציבורי קורס מיד ואינו מייצר תוצאות בדפדפן.

הרישיון

הפרויקט מפורסם תחת רישיון cc-by-nc-4.0. המשמעות היא שהשימוש מותר רק למטרות מחקר או פרויקטים אישיים, ואסור לכל שימוש מסחרי מכל סוג.

  • שינוי הקוד
  • חובת ייחוס
  • שימוש מסחרי: לא

הרישיון המלא ב־Hugging Face ↗