GPT
D

draw_to_search_art

רץ בדפדפן

merveapache-2.02023-12-21

  • gradio

מציירים או מעלים תמונה, ומקבלים יצירות אמנות דומות מתוך מאגר מקוון. זה מתאים למי שמחפש השראה ויזואלית או רוצה לבדוק איך מודל ראייה ממוחשבת מפרש קווים פשוטים.

  • הורדות בחודש
  • 74לייקים

מה זה

אתם מציירים ישירות על משטח הציור בממשק או מעלים קובץ תמונה קיים מהמחשב. בתגובה, הממשק מחזיר גלריה של יצירות אמנות שנראות הכי קרובות למה ששרבטתם, מתוך מאגר של עשרת אלפים יצירות מ־WikiArt.

מאחורי הקלעים רץ המודל google/siglip-base-patch16-224, שממיר את הציור שלכם לווקטור מאפיינים. במקביל, הקוד טוען אינדקס מוכן מראש שנבנה באמצעות FAISS ומכיל את הווקטורים של אותן 10,000 תמונות אמנות. המערכת מחשבת מרחקים וקטוריים ושולפת מתוך קובץ הנתונים את התוצאות שהכי דומות לציור.

מתאים ל

  • חיפוש אמנות לפי סקיצה

    משרבטים קווי מתאר של רעיון ומקבלים יצירות קלאסיות שדומות לו מבחינת קומפוזיציה.

  • השוואת תמונה למאגר ציורים

    מעלים צילום מהטלפון כדי לבדוק אילו ציורים היסטוריים מציגים מבנה צבעים או צורה מקבילים.

  • בדיקת יכולות SigLIP

    בוחנים בפועל איך המודל של גוגל מפרש ציורים מהירים לעומת תמונות מורכבות בעזרת FAISS.

איפה זה נופל

החיפוש מוגבל אך ורק ל־10,000 תמונות מתוך WikiArt שנשמרו באינדקס הספציפי, כך שהוא לא סורק את כל תולדות האמנות ולא ימצא יצירות מחוץ למאגר הזה. בנוסף, מודל SigLIP אומן על תמונות רגילות, ולכן שרבוט חלקי או סקיצה ברמת דיוק נמוכה עלולים להחזיר התאמות שמבוססות בעיקר על כתמי צבע או צורות גיאומטריות מקריות, ולא על הבנה של נושא הציור.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

השימוש בה פתוח לחלוטין ברשת ואינו דורש תשלום. אין צורך להזין פרטי אשראי או להירשם לאתר כדי להעלות תמונה או לצייר. הגישה חופשית דרך הדפדפן.

האם אפשר להריץ את הכלי הזה על המחשב שלי?

כן, הקוד והקבצים פתוחים להורדה. תצטרכו להוריד את קובץ האינדקס והנתונים מ־Hugging Face, להתקין את transformers ואת faiss, ולהריץ את app.py. בשביל ביצועים טובים מומלץ כרטיס מסך תואם.

במה זה שונה משימוש ישיר במודל של גוגל?

המודל SigLIP רק יודע להמיר תמונות וטקסט לוקטורים מתמטיים. כאן מישהו כבר לקח עשרת אלפים יצירות אמנות, חילץ מהן וקטורים, שמר אותם באינדקס חיפוש מהיר ובנה מעל זה ממשק ציור נוח.

כמה זמן לוקח לקבל תוצאות לציור?

החיפוש עצמו לוקח בדרך כלל שניות בודדות הודות לשימוש ב־FAISS ובמעבד גרפי. עם זאת, אם המופע בשרת היה כבוי, ייקח לו חצי דקה בערך להתעורר ולהוריד את המודל לזיכרון לפני החיפוש הראשון.

איך משתמשים

נכנסים לעמוד בדפדפן, בלי שום צורך להירשם או להתחבר לחשבון. פותחים את כלי הציור, משרבטים משהו עם העכבר או גוררים קובץ תמונה פנימה, ושולחים לעיבוד בלחיצה אחת.

הקוד רץ על חומרת zero-a10g של Hugging Face, ומשתמש בספריית spaces שמקצה מעבד גרפי לפי דרישה. החיפוש עצמו מול אינדקס FAISS לוקח בדרך כלל שניות בודדות, אך אם השרת היה רדום עשויה להיות המתנה קצרה עד שהמשאבים מוקצים והסביבה עולה.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמתיר שימוש חופשי בקוד, כולל התאמה ושימוש מסחרי לפי תנאי הרישיון. התמונות שאתם מעלים או מציירים נשלחות לעיבוד בשרת כדי לבצע את החיפוש, והקוד עצמו אינו כולל מנגנון ששומר אותן או מפרסם אותן הלאה.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗