GPT
B

better-florence-2

רץ בדפדפן

SkalskiPmit2024-07-03

  • gradio

ממשק בדיקה למשפחת מודלי הראייה Florence 2 של מיקרוסופט. מעלים תמונה, בוחרים משימה ומקבלים זיהוי אובייקטים, תיאורי תמונה ברמות פירוט שונות או פענוח טקסט.

  • הורדות בחודש
  • 198לייקים

מה זה

מעלים תמונה ובוחרים מודל מתוך הרשימה, שכוללת את גרסאות הבסיס והגרסאות הגדולות של Florence 2, עם או בלי כוונון עדין, לצד רישום של מודל phi-1_5. לאחר מכן בוחרים משימת עיבוד. המערכת מחזירה תמונה מסומנת בתיבות תיחום או פלט טקסטואלי, בהתאם למה שביקשתם.

הקוד משתמש בספריית supervision כדי לצייר את התיבות והאנוטציות על גבי התמונות. דוגמאות הממשק מציגות משימות של זיהוי אובייקטים והצעת אזורים על תמונות כלבים, ופענוח OCR על גבי תמונת כתב יד.

מתאים ל

  • חילוץ טקסט מתמונות

    זיהוי וקריאת טקסט וכתב יד מתוך קובצי תמונה באמצעות משימות ה־OCR.

  • זיהוי וסימון אובייקטים

    קבלת תיבות תיחום סביב עצמים בתמונה לבדיקת יכולות הגילוי של המודל.

  • יצירת תיאורים לתמונות

    הפקת כיתובים אוטומטיים ברמות פירוט משתנות לצורכי הנגשה או תיוג.

איפה זה נופל

הממשק מוגבל למשימות המוגדרות מראש בתפריט ולא מאפשר שינוי פרמטרים עמוק של המודל. ביצועי ה־OCR מוצגים בדוגמה על כתב יד בלבד, ואין מידע על תמיכה בשפות שאינן אנגלית, כמו עברית. תצטרכו לבדוק בעצמכם אם המודל מזהה טקסט מקומי.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

לא, הממשק פתוח לשימוש חופשי בדפדפן. אין צורך לשלם או להזין פרטי אשראי כדי להריץ תמונות.

האם אפשר להריץ את זה באופן מקומי?

כן, הקוד מבוסס על Gradio ומשתמש בספריות פתוחות כמו supervision ודגמי Hugging Face. הרישיון הוא MIT, כך שניתן להוריד את הקבצים ולהריץ אותם על חומרה מתאימה.

במה הממשק שונה מהרצת המודל ישירות?

הוא חוסך את כתיבת הקוד לטעינת המשקלים ולציור התיבות על התמונה. מנגד, הוא מגביל אתכם רק לתפריטי המשימות שנבנו מראש ללא גישה להגדרות פנימיות.

איך משתמשים

בוחרים את גרסת המודל ואת סוג המשימה משני תפריטים נפתחים, מעלים תמונה ולוחצים על Submit. אין צורך בהרשמה או בהתחברות לחשבון. ההרצה מתבצעת על מאיץ מסוג zero-a10g, שמקצה משאבי עיבוד לפי דרישה, כך שזמן התגובה תלוי בזמינות החומרה באותו רגע.

הרישיון

הקוד מופץ תחת רישיון MIT, שמאפשר שימוש חופשי כולל שימוש מסחרי, שינוי והפצה. התמונות שאתם מעלים נשלחות לעיבוד בשרתי Hugging Face המארחים את הממשק.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗