חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
I

Image-Stitching

רץ בדפדפן

korniaapache-2.02022-09-08

  • gradio

הכלי מחבר שתי תמונות חופפות לפנורמה אחת ישירות בדפדפן. הוא מיועד למי שרוצה לבדוק התאמת תמונות בלי להתקין ספריות עיבוד תמונה מקומיות.

  • —הורדות בחודש
  • 54לייקים

מה זה

אתם מעלים שתי תמונות נפרדות שיש ביניהן אזור חפיפה, ומקבלים תמונה אחת רחבה שמורכבת משתיהן. הממשק מציע דוגמה מוכנה מראש עם שני קבצים, foto1A ו־foto1B, כדי שאפשר יהיה לראות את החיבור בלי להעלות קבצים מהמחשב.

מאחורי הקלעים רץ רכיב ImageStitcher של ספריית Kornia, שמשתמש במודל LoFTR לצורך זיהוי והתאמת נקודות עניין בין התמונות. המודל מוצא קשרים גאומטריים בין האזורים החופפים, מחשב את הטרנספורמציה הנדרשת, ומיישר את הפריימים לתמונה בודדת באמצעות PyTorch.

מתאים ל

  • בדיקת תאימות פנורמה

    בדיקה מהירה אם שני צילומים סמוכים מכילים מספיק חפיפה כדי להתחבר לתמונה אחת.

  • הדגמת יכולות LoFTR

    בחינה מעשית של ביצועי מודל ההתאמה מבית Kornia על תמונות אמיתיות לפני הטמעה בקוד.

  • חיבור תמונות ללא התקנה

    יצירת תמונה מחוברת ברגע ישירות מהדפדפן בלי להגדיר סביבת פייתון ותלויות כבדות.

איפה זה נופל

היישום מוגבל לחיבור של שתי תמונות בלבד ואין אפשרות להזין רצף של צילומים לפנורמה שלמה. בנוסף, אין בממשק שום הגדרות לשליטה ברמת הדיוק, בחיתוך או במיזוג הצבעים בין החלקים. אם שתי התמונות צולמו בזוויות שונות מדי או בלי חפיפה ברורה, החיבור ייכשל או יציג עיוותים קשים.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

לא, הגישה חופשית לגמרי דרך הדפדפן. אין צורך להכניס אמצעי תשלום ואין הגבלת שימוש גלויה בממשק.

מה קורה עם התמונות שאני מעלה לשם?

הקבצים נשלחים לעיבוד על השרת שמריץ את האפליקציה כדי לייצר את התוצאה. הממשק לא מפרט מדיניות שמירה, ולכן עדיף להימנע מהעלאת מידע אישי או מסמכים מסווגים.

במה הממשק הזה שונה משימוש בספריית Kornia ישירות בקוד?

האפליקציה עוטפת את היכולת של הספרייה בממשק גרפי מינימלי בלי אפשרות לכוונן פרמטרים. בקוד עצמו אפשר לשרשר יותר משתי תמונות, לבחור התנהגות שונה ולהשתמש במאיץ גרפי.

האם אפשר להריץ את זה על המחשב שלי?

כן, הקוד פתוח תחת רישיון apache-2.0 ומבוסס על סקריפט app.py קצר. אפשר להתקין את ספריות gradio ו־kornia ולהריץ את אותו הממשק בדיוק באופן מקומי.

איך משתמשים

גוררים תמונה אחת לתיבה הראשונה, תמונה שנייה לתיבה המקבילה, ולוחצים על Stitch Images. אפשר גם פשוט ללחוץ על הדוגמה המובנית כדי לטעון אותה מיד.

אין צורך בהרשמה או התחברות לחשבון. הריצה מתבצעת על חומרת cpu-upgrade, כך שעיבוד מבוסס רשתות נוירונים ללא מעבד גרפי עשוי לקחת כמה שניות טובות לכל זוג תמונות, במיוחד ברזולוציות גבוהות.

הרישיון

הקוד מופץ ברישיון apache-2.0, שמאפשר שימוש חופשי כולל שימוש מסחרי ושינוי הקוד. לגבי התמונות שאתם מעלים, הן מועברות לעיבוד בשרת שמריץ את הדמו, ולכן לא מומלץ להעלות חומרים רגישים או פרטיים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗