חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
Y

yolov6

רץ בדפדפן

naterawmit2022-07-08

  • gradio

הדגמה לזיהוי אובייקטים בתמונות ובווידאו בעזרת מודלים ממשפחת YOLO. היא מתאימה למפתחים שרוצים לבדוק ביצועי זיהוי בזמן אמת בלי להגדיר סביבה מקומית.

  • —הורדות בחודש
  • 60לייקים

מה זה

האפליקציה מקבלת תמונות, קובצי וידאו או שידור ישיר ממצלמת רשת, ומחזירה את אותם קבצים כשהם מסומנים בתיבות תוחמות מסביב לעצמים שזוהו. מתחת למכסה המנוע הקוד מתבסס על המודל nateraw/yolov6s לצד קוד מבית Ultralytics YOLOv5, שניהם מיועדים למשימות זיהוי עצמים מהיר בתמונה ובווידאו.

הממשק מחולק ללשוניות לפי סוג הקלט, ומציע דוגמאות מוכנות של תמונות שמוגדרות מראש עם ערכי סף שונים. אפשר לשחק עם מדדי הביטחון ויחס החפיפה כדי לראות איך הסינונים משפיעים על כמות התיבות שנשארות על המסך, ובווידאו אפשר גם לחתוך קטעים קצרים לבדיקה.

מתאים ל

  • בדיקת זיהוי בתמונות סטילס

    העלאת תמונות לבחינת רמת הדיוק וסימון העצמים בעזרת כיוון מדדי הסף.

  • ניתוח קטעי וידאו קצרים

    בדיקת מהירות ויציבות הזיהוי על פני כמה שניות של וידאו מקומי.

  • הדגמה ישירה ממצלמת רשת

    הזרמת וידאו מהמצלמה כדי לבדוק איך המודל מתמודד עם תנועה בזמן אמת.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה נמצאת כרגע במצב של תקלת ריצה ולא מגיבה לקלטים חדשים. בנוסף, חיתוך הווידאו מוגבל לקטעים קצרצרים בלבד של עד עשר שניות, כך שאי אפשר לבחון עליה סרטים שלמים או מעקב רציף וממושך. כדאי גם לשים לב שהקוד מערבב תלויות בין גרסאות מודלים שונות, מה שעלול לייצר תוצאות שלא משקפות בדיוק את הגרסה הרשמית של הכלי המקורי.

שאלות
נפוצות

האם השימוש בהדגמה כרוך בתשלום?

לא, הכלי זמין לגמרי בחינם דרך הדפדפן ואינו דורש הרשמה מראש. השרת פועל על תשתית חומרה שיתופית, אך כרגע הוא ממילא במצב שגיאה ולא מגיב. אם התקלה תיפתר, הגישה צפויה להישאר פתוחה ללא עלות.

מה קורה לקבצים שמעלים לעמוד?

התמונות והסרטונים נשלחים לשרת שבו רץ הקוד לצורך עיבוד מקומי בקבצים זמניים. הם לא נשמרים כמאגר קבוע, אבל הם כן עוברים תשתית ענן ציבורית. בשל כך רצוי להימנע מהעלאת מידע אישי או רגיש.

במה ההדגמה הזו שונה מהרצת המודל לבד?

העמוד מספק ממשק גרפי מהיר לבדיקה חזותית בלי התקנת ספריות, פייתון או דרייברים לתמיכה בכרטיסי מסך. מצד שני, הוא מוגבל מאוד באפשרויות, כולל קיצוץ וידאו לכמה שניות בלבד וללא שליטה מלאה בפרמטרים. להרצה אמיתית בפרויקט עדיף לקחת את המשקולות ולהריץ אותן ישירות בקוד שלכם.

האם אפשר להריץ את הכלי הזה באופן מקומי?

כן, כל הקוד של האפליקציה זמין בעמוד ברישיון חופשי וניתן להורדה ישירה. תצטרכו להתקין סביבת פייתון עם ספריות כמו גרדיו, פייטורץ ואופן סי וי כדי להפעיל אותו במחשב שלכם. שימוש כזה יאפשר גם לעקוף את מגבלת הזמן של הווידאו שהוגדרה בממשק הרשת.

איך משתמשים

בוחרים לשונית מתאימה, מעלים קובץ תמונה או וידאו, ומכוונים את הסליידרים של הסף לפי הצורך. בעבודה עם וידאו יש אפשרות לקבוע את שניות ההתחלה ומשך הזמן, עד עשר שניות בחומרה גרפית או שלוש שניות בלבד במעבד רגיל. הריצה מוגדרת על מעבד גרפי מסוג t4-small, כך שהעיבוד אמור להיות מהיר למדי בלי צורך בהתחברות או תשלום, אך נכון לעכשיו העמוד מדווח על שגיאת ריצה כללית שמונעת שימוש רגיל.

הרישיון

הקוד מפורסם תחת רישיון mit שמאפשר שימוש חופשי, העתקה ושינוי, כולל לצרכים מסחריים. התמונות וסרטוני הווידאו שאתם מעלים עוברים דרך השרת שמארח את ההדגמה, ולכן לא מומלץ להזין קבצים פרטיים או חומר רגיש.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗