חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
D

danbooru-tags-transformer-v2-with-wd-tagger-b

רץ בדפדפן

John6666apache-2.02024-06-04

  • gradio

הכלי מנתח תמונות ומייצר תגיות בסגנון Danbooru או E621 עבור מודלי תמונה כמו Pony ו־Animagine. הוא מיועד ליוצרים שרוצים להוציא פרומפטים מפורטים מתמונות קיימות או להרחיב תגיות טקסט.

  • —הורדות בחודש
  • 50לייקים

מה זה

מעלים תמונה ישירות מהמחשב או מדביקים אותה מלוח הגזירים, ובוחרים אילו מנועי ניתוח להפעיל. אפשר לחלופין להזין ידנית שמות של דמויות, זכויות יוצרים ותגיות כלליות בתיבות טקסט ייעודיות, ויש גם כפתור לתרגום הפרומפט לאנגלית.

בצד המודלים, הממשק מחבר שורה של כלים: מנועי WD Tagger ו־Z3D לזיהוי תגיות אנימה, לצד גרסאות שונות של Florence 2 לתיאור טבעי של תמונות עבור Flux ו־SD3, ומודלים של Lamini להרחבת טקסט. התוצאה היא רשימת תגיות מובנית שמותאמת לסגנון של Danbooru או E621, עם אפשרות לסינון תגיות גוף ובגדים בלבד.

מתאים ל

  • חילוץ תגיות מתמונות אנימה

    מעלים איור ומקבלים רשימת תגיות מדויקת של הדמות, הלבוש והרקע כדי לשחזר את הסגנון במודלים ייעודיים.

  • המרה לפורמט E621

    מזינים פרומפט קיים וממירים את התגיות לפורמט שמתאים ישירות ליצירה במודל Pony.

  • הרחבת פרומפטים קצרים

    מזינים שם דמות וכמה מאפיינים בסיסיים, והמודל משלים תיאור מפורט לפי רמת יצירתיות ואורך נבחרים.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה כרגע במצב מושהה, כך שאי אפשר פשוט להיכנס ולהשתמש בה בלי שכפול או הפעלה מחדש. מעבר לזה, ניתוח תמונות שאינן בסגנון איור או אנימה עלול לתת תיוגים לא מדויקים בגלל ההתמקדות במאגרי Danbooru ו־E621. גם ריבוי המודלים בממשק אחד יוצר עומס של הגדרות סף שדורש ניסוי וטעייה כדי לקבל תוצאה נקייה.

שאלות
נפוצות

האם האפליקציה זמינה עכשיו לשימוש חינם?

הקוד פתוח תחת רישיון חופשי, אבל כרגע העמוד נמצא במצב מושהה ולא רץ ברשת. כדי להשתמש בו צריך לשכפל את המרחב לחשבון אישי ולהריץ אותו שם. הפעלה בחשבון פרטי עשויה לדרוש משאבי מחשוב בתשלום בהתאם לחומרה שתבחרו.

כמה זמן לוקח לתהליך להסתיים?

הקוד משתמש במנגנון spaces שמעביר את העיבוד למעבדים גרפיים בעת לחיצה, כך שהניתוח עצמו אמור לקחת שניות בודדות. יחד עם זאת, אם השרת צריך להתעורר או לטעון מודלים מרובים של Florence ו־WD Tagger לזיכרון, תיתכן המתנה נוספת בריצה הראשונה. במצבו הנוכחי הכלי כלל אינו מעבד בקשות.

האם אפשר להריץ את הכל באופן מקומי במחשב?

כן, כל הקוד של ממשק Gradio והסקריפטים זמינים בעמוד המאגר. אפשר להוריד את הקבצים ולהתקין את התלויות אצלכם, בתנאי שיש לכם כרטיס מסך מתאים עם מספיק זיכרון להרצת המודלים. המודלים עצמם מגיעים ממאגרים ציבוריים ב־Hugging Face וייטענו לפי ההגדרות בקוד.

מה קורה לתמונות שאני מעלה לכלי?

הממשק מוגדר למחוק את זיכרון המטמון בטווח שבין 60 שניות לשעה אחת מרגע הפעולה. הקבצים מעובדים לצורך פעולת הניתוח בלבד ואינם מוצגים במאגר ציבורי. למרות זאת, לא מומלץ להעלות חומרים רגישים ליישומים שרצים על תשתית שיתופית.

איך משתמשים

לוחצים על הכפתור הראשי כדי לחלץ את התגיות מהתמונה, או מנווטים ללשונית ההרחבה כדי לקבל פרומפט מלא לפי רמת יצירתיות, יחס תמונה ואורך רצוי. ההגדרה כוללת התחברות לחשבון Hugging Face, והקוד מוגדר עם חבילת spaces כך שחישובים כבדים מועברים למעבדים גרפיים לפי דרישה. עם זאת, נכון לעכשיו העמוד במצב מושהה ולא ניתן להריץ אותו ישירות בדפדפן בלי להפעיל אותו מחדש.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0. הרישיון הזה מתיר שימוש חופשי בקוד, שינוי והפצה, כולל לצרכים מסחריים, בכפוף לשמירה על הקרדיט ותנאי הרישיון המקוריים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗