ScouterAI

מה זה

מעלים תמונה לתיבת הטקסט יחד עם הוראה מילולית, ומקבלים תגובה בצ'אט לצד תוצרים חזותיים שמופיעים בגלריה ייעודית. הממשק מספק דוגמאות מובנות להרצה מהירה כדי להמחיש את היכולות שלו על קבצים קיימים.

מאחורי הקלעים רץ סוכן שנבנה עם smolagents ומשתמש ב־Claude של Anthropic לניהול המשימות. כדי לעבד את התמונות בפועל, הוא משלב מודלים ייעודיים: all-MiniLM-L6-v2 לשפה, sam-hq לחיתוך מקטעים ברזולוציה גבוהה, ו־Stable Diffusion Upscaler להגדלת תמונות. בנוסף, הקוד נשען על אפליקציות Modal, מאגרי מודלים של Hugging Face וספריית supervision.

מתאים ל

• פילוח מקטעים בתמונות

  זיהוי וחיתוך מדויק של עצמים מתוך תמונה בעזרת מודלי SAM-HQ לפי בקשה בצ'אט.

• הגדלת תמונות

  שדרוג רזולוציה ואיכות של קבצים בעזרת מודל stable-diffusion-x4-upscaler.

• ניסוי בסוכני ראייה

  בחינת האופן שבו smolagents מתאם בין מודלי ראייה שונים על בסיס הוראות בשפה חופשית.

איפה זה נופל

כרגע הדף מדווח על שגיאת ריצה (RUNTIME_ERROR), כך שאי אפשר להשתמש בו ישירות בלי שהיוצרים יתקנו את התקלה או שתריצו את הקוד בעצמכם. מעבר לכך, התלות במפתח API חיצוני אומרת שהשימוש עולה לכם כסף על הטוקנים של Anthropic, והוא לא יעבוד כלל בלעדיו.

איך משתמשים

נכנסים לממשק, אבל לפני שמתחילים חייבים להזין מפתח API אישי של Anthropic ולבחור מודל מהרשימה. לאחר מכן מקלידים בקשה, מצרפים תמונה ושולחים. השרת בהגדרת מעבד בסיסי, מה שאומר שעיבוד כבד דרך מודלים מקומיים עשוי להיות איטי מאוד, אם כי חלק מהפעולות מועברות לתשתיות חיצוניות.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמתיר שימוש חופשי, שינוי קוד והפצה מסחרית. לגבי התמונות שאתם מעלים והתוצרים שנוצרים, הם כפופים גם לתנאי השימוש ומדיניות הפרטיות של Hugging Face ושל Anthropic.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗