חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
U

uncanny-faces

רץ בדפדפן

pcuenqרישיון לא דווח2023-03-23

  • gradio

מעלים תמונת פנים או מצלמים במצלמת רשת, כותבים תיאור טקסט ומקבלים תמונות שנוצרות לפי מבנה הפנים המקורי. הכלי מיועד למי שרוצה לבחון שליטה במבנה תווי פנים ביצירת תמונות.

  • —הורדות בחודש
  • 66לייקים

מה זה

הממשק מבוסס על ControlNet בשילוב מודל הבסיס של Stable Diffusion 2.1, לצד מודל ייעודי בשם uncannyfaces_25K. התהליך מתחיל בזיהוי הפנים והמבנה שלהם באמצעות ספריות כמו retinaface ו־SPIGA, שמחלצות נקודות ציון מרחביות של תווי הפנים מהקובץ שנמסר.

המשתמש בוחר להעלות קובץ תמונה או להפעיל את מצלמת הרשת, ומזין הנחיית טקסט בתיבת הפרומפט. המערכת מייצרת פלט שמוצג בתוך גלריה של שתי עמודות. יש בממשק גם דוגמאות מוכנות מראש עם תמונות כמו פדרו ותמונות מבחן נוספות כדי לראות את התוצאות בלי להעלות קובץ משלכם.

מתאים ל

  • הפקת דיוקנאות לפי מנח פנים

    יצירת דמויות חדשות בטקסט ששומרות בדיוק על זווית הראש והבעת הפנים של תמונת המקור.

  • בדיקת מודל uncannyfaces

    בחינת יכולות השליטה של מודל המבוסס על נקודות ציון של SPIGA ורשתות זיהוי פנים.

  • יצירה ישירה ממצלמת רשת

    צילום עצמי ישיר דרך הדפדפן והפיכת ההבעה החיה לבסיס ליצירת תמונה חדשה לגמרי.

איפה זה נופל

הבעיה המרכזית היא שהחלל תקוע בשגיאת קוד ולא נבנה בהצלחה, כך שהוא מושבת לגמרי. מעבר לזה, הקוד זקוק לפנים ברורות כדי שספריות הזיהוי יעבדו בלי לזרוק שגיאות למשתמש, והוא לא מתאים לתמונות כלליות או לגוף מלא. הדוגמאות השמורות מראש נותנות מושג על היכולת של המודל, אבל הן רצו מראש ולא מייצגות כרגע כלי פעיל.

שאלות
נפוצות

האם אפשר להשתמש באפליקציה הזו כרגע?

לא. האפליקציה מוגדרת במצב של שגיאת בנייה ולכן אינה עולה או מתפקדת בדפדפן כרגע. תצטרכו להמתין לעדכון מצד היוצר או להוריד את הקוד ולהריץ אותו באופן עצמאי.

האם השימוש בה כרוך בתשלום?

הגישה לעמוד פתוחה בחינם ללא תשלום, אך כאמור המופע עצמו תקול כרגע. החומרה שמוקצית לו היא מאיץ t4-small שמסופק ללא עלות מצד המשתמש.

האם אפשר להריץ את הכלי הזה במחשב מקומי?

כן, קבצי הקוד כולל app.py זמינים לעיון והורדה. עם זאת, תצטרכו להתקין בעצמכם את ספריות התשתית של SPIGA, retinaface והמודלים מ־Hugging Face, ולפתור את בעיות התלויות שגרמו לשגיאת הבנייה.

מה קורה עם התמונות שמעלים לממשק?

הקוד מעבד את התמונות בזיכרון של השרת לצורך חילוץ נקודות הפנים ויצירת התמונה החדשה. מאחר שהרישיון ומדיניות הפרטיות לא פורטו, לא כדאי להעלות תמונות רגישות או אישיות למרחב ציבורי מסוג זה.

איך משתמשים

בפועל, המרחב נמצא כרגע במצב של שגיאת בנייה ולכן אי אפשר להריץ אותו ישירות בדפדפן כרגע. ברמת התכנון הוא מוגדר לרוץ על מאיץ t4-small ללא צורך בהתחברות מיוחדת, כאשר לוחצים על כפתור Generate וממתינים לעיבוד. עם זאת, כל עוד מפתח הקוד לא יתקן את שגיאת הבנייה, לחיצה על הממשק לא תניב תוצאה.

הרישיון

הרישיון של המרחב לא דווח על ידי היוצר. במצב כזה אין הרשאה ברורה לגבי שימוש מסחרי בקוד או בתוצרים, ויש להתייחס לקוד ככזה שנמצא תחת זכויות יוצרים מלאות של המפרסם.

הרישיון המלא ב־Hugging Face ↗