GPT
I

InstructIR — הדגמה

קוד פתוח

marcosvmit2024-01-29

  • gradio

מעלים תמונה, כותבים הוראה טקסטואלית רגילה באנגלית, והאלגוריתם מתקן את התמונה לפיה. פתרון ממוקד למי שרוצה לשפר צבעים או חדות בלי להסתבך עם עריכה ידנית.

  • 61.1 MBמשקל הקבצים
  • הורדות בחודש
  • 213לייקים

מה זה

הממשק פשוט מאוד. אתם מעלים קובץ תמונה, מקלידים הנחיה חופשית בשפה טבעית, ומקבלים גרסה משופרת. הדוגמה המובנית מציגה בקשה לשפר צבעים דהויים כדי שהתמונה תתאים לאינסטגרם, מה שמכוון מראש לאופי התיקונים המצופה כאן.

מאחורי הקלעים רצים שני רכיבים עיקריים שנטענים מקבצי משקולות ייעודיים. מודל שפה מנתח את הטקסט שלכם בעזרת מודלי אמבדינג כמו MiniLM או distilbert, ומעביר את ההנחיות למודל עיבוד התמונה im_instructir-7d שמבצע את השחזור בפועל לפי המאמר המקורי.

מתאים ל

  • תיקון צבעים אוטומטי

    שיפור תמונות דהויות בעזרת הנחיה פשוטה להחיות את הצבעים לקראת שיתוף ברשת.

  • שחזור איכות תמונה

    הורדת רעשים דיגיטליים וחידוד פרטים על בסיס בקשה מילולית ישירה.

  • בדיקת מודל מחקרי

    בחינה מהירה בדפדפן של שיטת שחזור מונחית שפה לפני הטמעה של הקוד בפרויקט.

איפה זה נופל

המודל אומן על הנחיות באנגלית, כך שאין טעם לנסות פקודות בעברית. בנוסף, מדובר בשחזור ושיפור תמונה קיימת ולא במחולל תמונות מאפס, כך שהוא לא ייצר אובייקטים חדשים שלא היו שם. כדאי לזכור שזו הדגמת מחקר, ולכן בקשות מורכבות מדי או ניסוחים עמומים עלולים להחזיר שינוי מינימלי או פלט לא מדויק.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

לא. ההדגמה פתוחה לחלוטין לשימוש ישיר בדפדפן דרך Hugging Face ללא תשלום וללא צורך בחשבון.

מה קורה לקבצים שאני מעלה?

התמונות נשלחות לשרת לצורך העיבוד של המודל. מכיוון שמדובר בסביבת הדגמה ציבורית, עדיף להימנע מהעלאת חומרים רגישים או אישיים.

אפשר לכתוב הנחיות בעברית?

לא מומלץ. מודלי השפה של המערכת, בהם distilbert-base-uncased, מכוונים לאנגלית, וסביר להניח שהוראות בעברית יתנו תוצאות שגויות.

האם אפשר להריץ את זה על המחשב שלי?

כן, הקוד ברישיון MIT והמשקולות זמינות להורדה. תצטרכו סביבת פייתון מתאימה ומעבד גרפי סביר כדי לקבל זמני ריצה טובים.

איך מריצים

אין צורך בהרשמה או התחברות. נכנסים לעמוד, בוחרים תמונה, כותבים את הבקשה ולוחצים על כפתור ההרצה. המערכת יושבת על חומרת Zero-A10G, כך שהעיבוד מקבל גישה למאיץ גרפי חזק בזמן אמת, והתוצאה חוזרת בדרך כלל תוך שניות ספורות אלא אם יש עומס רגעי על השרת המשותף.

pip install -U huggingface_hub
hf download marcosv/InstructIR

הקבצים

4 קבצים במאגר, 61.1 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הקוד מפורסם תחת רישיון MIT, שמאפשר שימוש חופשי וגמיש למדי כולל שימוש מסחרי והתאמה אישית. היות שההרצה מתבצעת על שרתי Hugging Face ציבוריים, לא מומלץ להעלות לשם תמונות פרטיות או מידע רגיש.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא בעמוד המודל ↗