חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
Y

yoloe — הדגמה

קוד פתוח

jameslahmagpl-3.02025-03-10

  • gradio

הכלי מזהה ומסמן אובייקטים בתמונות לפי טקסט חופשי, סימון ויזואלי או זיהוי אוטומטי. הוא מיועד למפתחים וחוקרי ראייה ממוחשבת שרוצים לבדוק את ביצועי משפחת דגמי YOLOE.

  • 1.2 GBמשקל הקבצים
  • —הורדות בחודש
  • 68לייקים

מה זה

אתם מעלים תמונה ובוחרים באחת משלוש דרכי עבודה. באפשרות הטקסט מקלידים שמות עצם באנגלית מופרדים בפסיקים, כמו אדם או אוטובוס. באפשרות הוויזואלית מסמנים מלבן או מסכה על אובייקט כדי שהמודל ימצא מופעים דומים באותה תמונה או בתמונה נפרדת. במצב האוטומטי מעלים תמונה בלי שום הנחיה, והמודל מחפש עצמים בעצמו על בסיס אוצר מילים פנימי רחב.

התוצאה שמתקבלת היא התמונה המקורית ועליה תיבות תוחמות ומסכות סגמנטציה צבעוניות מסביב לכל עצם שזוהה. הממשק מאפשר לשלוט בגודל התמונה, ברף הביטחון ובערך ה־IOU.

מאחורי הקלעים רץ מימוש מבוסס PyTorch ו־Ultralytics של דגמי YOLOE בגרסאות v8 ו־11, שפותחו כדי לחבר בין מהירות של רשתות YOLO לבין יכולת זיהוי בעולם פתוח.

מתאים ל

  • זיהוי עצמים מטקסט חופשי

    מזינים תמונה ושמות עצמים באנגלית כדי לאתר ולסמן פריטים שאינם חלק מקטגוריות קבועות מראש.

  • חיפוש דוגמה ויזואלית

    מסמנים פריט בעזרת תיבה או מסכה כדי לחפש מופעים דומים בתוך התמונה או בתמונה אחרת.

  • סגמנטציה מלאה ללא קלט

    מריצים את המצב האוטומטי כדי לחלץ מסכות ותיבות לכל העצמים הבולטים בלי להגדיר מילות מפתח.

איפה זה נופל

ההנחיות הטקסטואליות מבוססות על שפה חופשית אך מאומנות על מאגרים באנגלית, כך שהקלדה בעברית לא תעבוד. בנוסף, הממשק מיועד לתמונות בודדות ולא מתאים לווידאו, למרות שקוד המקור של המודל נבנה לעבודה בזמן אמת. במצב הוויזואלי, אם תשכחו לסמן מלבן או מסכה, תקבלו התראה וההרצה תיעצר.

שאלות
נפוצות

האם השימוש בהדגמה עולה כסף?

לא, ההרצה בעמוד פתוחה לגמרי בדפדפן ללא תשלום וללא צורך במנוי. השרת מסתמך על חומרת A10G שמוקצית אוטומטית בעת הבקשה.

האם הקבצים שלי נשמרים בשרת?

התמונות שאתם מעלים מועברות לתשתית של Hugging Face לצורך ביצוע החישוב והחזרת התוצאה. הממשק לא כולל מנגנון שמירת גלריה, אך אין להעלות מידע רגיש או פרטי.

אפשר להריץ את המודל על המחשב שלי?

כן, הקוד הועלה כיישום מבוסס PyTorch וספריית Ultralytics. משקולות הדגמים פתוחות להורדה מהמאגר וניתן להריץ אותן עצמאית בסביבת פיתוח מקומית עם מעבד גרפי מתאים.

מה ההבדל בין ההדגמה הזאת למודל המקורי?

ההדגמה מציגה בדיקה אינטראקטיבית לתמונות בודדות דרך דפדפן. המודל עצמו תומך בקצבי פריימים גבוהים מאוד, המרה לפורמטים כמו TensorRT או CoreML, והרצה על וידאו בזמן אמת.

איך מריצים

לוחצים על הלשונית הרצויה, מעלים את התמונה, מגדירים את הפרמטרים ולוחצים על הכפתור שמפעיל את הזיהוי. אין צורך להתחבר או להירשם. השרת מקצה מעבד גרפי מסוג Zero-A10G לפי דרישה, כך שעיבוד תמונה בודדת מסתיים לרוב תוך שניות בודדות, אלא אם השרת עמוס ואז נכנסים לתור קצר.

pip install -U huggingface_hub
hf download jameslahm/yoloe

הרישיון

הרישיון של היישום לא דווח במאגר. בלי הצהרת רישיון רשמית של המפתח, אין אישור מפורש לשימוש מסחרי בקוד או במשקולות. התמונות שאתם מעלים עוברות לשרתי Hugging Face לצורך עיבוד ההדגמה.

הרישיון המלא בעמוד המודל ↗