חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
P

hadisalman/photoguard

רץ בדפדפן

hadisalmanapache-2.02023-02-24

  • gradio

הכלי מגן על תמונות מפני מניפולציות של בינה מלאכותית על ידי שיבוש מכוון של מודלי יצירה. הוא מיועד למי שרוצה לבדוק איך חיסון תמונה משבש עריכות מבוססות טקסט.

  • —הורדות בחודש
  • 40לייקים

מה זה

אתם מעלים תמונה, מסמנים בעזרת מברשת את האזורים שרוצים לשמור, למשל פנים, ומוסיפים תיאור טקסטואלי שמנחה את העריכה שרוצים לבצע. הממשק כולל אפשרויות שליטה מתקדמות כמו קביעת סיד, סליידר לעוצמת ההנחיה בין 0.1 ל־25.0, ומספר צעדי עיבוד בין 10 ל־250. ישנה תיבת סימון בשם חיסון, והתוצאות מוצגות בגלריית תמונות לצד רשימת דוגמאות מובנות להרצה מהירה.

מאחורי הקלעים רץ המודל runwayml/stable-diffusion-inpainting יחד עם חישובי שיפועים ואופטימיזציה שמשבשים את היכולת שלו לעבד את הקובץ. הקוד מבצע אופטימיזציה ישירה על הפיקסלים כדי לגרום למודל העריכה להציג שגיאות או פלט מעוות ברגע שמנסים לשנות את החלקים המוגנים. זו הדגמה מחקרית של מאמר שנועדה להראות הגנה אקטיבית מפני דיפ פייק ועריכות לא מורשות.

מתאים ל

  • בדיקת שיבוש עריכות

    בחינת האופן שבו חיסון פיקסלים משבש את יכולת היצירה של מודל אינפיינטינג.

  • הגנה על תמונות פנים

    סימון תווי פנים במסכה כדי למנוע מניפולציות זדוניות ועריכות דיפ פייק.

  • הדגמת מחקר אבטחה

    המחשת התקפות אדברסריאליות נגד מודלי דיפוזיה על בסיס נתוני המאמר.

איפה זה נופל

נכון לעכשיו אי אפשר להשתמש בכלי ברשת כי השרת נמצא במצב של שגיאת ריצה. מעבר לזה, ההגנה מכוונת ספציפית נגד המודל runwayml/stable-diffusion-inpainting, ולכן היא לא בהכרח מונעת עריכות במודלים חדשים יותר או בשיטות שינוי אחרות שלא מבוססות על אותה ארכיטקטורה. מומלץ לבדוק את יעילות השיבוש באופן עצמאי ולא להסתמך עליו כהגנה מוחלטת.

שאלות
נפוצות

האם השימוש בכלי עולה כסף?

הגישה לממשק הרשת היא בחינם ואינה דורשת תשלום. עם זאת, נכון לעכשיו היישום מדווח על שגיאת ריצה בענן ולכן אי אפשר להריץ אותו ישירות בדפדפן.

מה קורה לתמונות שאני מעלה?

הקבצים נשלחים לעיבוד על גבי השרת שמריץ את היישום כדי לבצע את האופטימיזציה והאינפיינטינג. אין בתיעוד פירוט לגבי שמירה ארוכת טווח של הקבצים, אך מדובר בסביבה ציבורית.

האם אפשר להריץ את הכלי מקומית במחשב?

כן, הקוד זמין תחת רישיון apache-2.0 ומשתמש בספריות סטנדרטיות כמו diffusers ו־torch. כדי להריץ אותו עצמאית תצטרכו חומרה תואמת עם מאיץ גרפי חזק כמו זה שמוגדר במקור.

איך הכלי שונה מסתם מודל עריכה רגיל?

במקום רק לערוך תמונות לפי טקסט, הוא מוסיף שכבת אופטימיזציה שמחסנת את התמונה. התהליך הזה משנה את הפיקסלים בצורה ממוקדת כדי לגרום למודל העריכה להיכשל בניסיון לשנות אותה.

איך משתמשים

טוענים תמונה לממשק, מציירים מסכה על האזור הרצוי, מקלידים פרומפט ולוחצים על כפתור השליחה. מתחת למכסה המנוע מוגדר מאיץ גרפי a10g-large, כך שהחישוב אמור להיות מהיר יחסית, אבל מספר צעדי העיבוד משפיע ישירות על זמן ההמתנה. אין צורך בהרשמה או התחברות כדי לגשת לממשק.

הרישיון

הקוד מופץ תחת רישיון apache-2.0, שמאפשר שימוש חופשי, שינוי והפצה, כולל לצרכים מסחריים בכפוף לתנאי הרישיון. תמונות שאתם מעלים מועברות לעיבוד על גבי השרת שמריץ את היישום.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗