Florence-2-SD3-Captioner — הדגמה

מה זה

אתם מעלים תמונה ומקבלים תיאור טקסטואלי מפורט באנגלית, שנועד לשמש כהנחיה ליצירת תמונה דומה. הממשק כולל שדה פשוט להעלאת קובץ ותיבת פלט אחת שמציגה את התוצאה הסופית, בלי הגדרות מסובכות מסביב.

מאחורי הקלעים רץ שילוב של מודל הבסיס Florence-2 של מיקרוסופט עם גרסה מכווננת של היוצר, שנקראת באותו השם. המערך הזה תוכנן לקרוא אלמנטים חזותיים ולתרגם אותם לסגנון הניסוח ש־SD3 מגיב אליו בצורה הטובה ביותר.

בעמוד עצמו שולבו תמונות לדוגמה תחת הכותרת Try captioning on below examples, כך שאפשר לבדוק את אופי התיאורים מיד בלי לחפש קובץ משלכם.

מתאים ל

• הינדוס לאחור של תמונות

  אתם מעלים תמונה שמצאה חן בעיניכם ומקבלים פרומפט שמשחזר את הסגנון והקומפוזיציה שלה.

• אימון מודלים ותיוג

  יצירת כתוביות מפורטות לקובצי תמונות עבור סט נתונים שמיועד לכוונון של מודלי יצירה.

• השראה לכתיבת פרומפטים

  בדיקה של אופן הניסוח המדויק שמתאים למודלי תמונה חדשים כדי לשפר את הכתיבה הידנית שלכם.

איפה זה נופל

הכלי מפיק טקסט בלבד ולא מייצר תמונות חדשות, כך שעדיין תצטרכו להעביר את הפרומפט למודל יצירה בנפרד. אין כאן אפשרות לבחור את סגנון התיאור, לקבוע את אורכו או לבקש ניתוח בשפה שאינה אנגלית. אם תעלו תמונה מורכבת במיוחד עם הרבה פרטים זעירים, הפירוט עלול לפספס חלק מהאלמנטים.

איך מריצים

גוררים תמונה לתיבת הקלט ולוחצים על Submit. התוצאה מופיעה בתיבת הטקסט לצד התמונה, ואפשר להעתיק אותה מיד לשימוש במחולל תמונות.

האפליקציה רצה על חומרת מעבד בסיסית, כך שזמן העיבוד ארוך יותר מאשר בהרצה על כרטיס גרפי ייעודי. אין צורך לפתוח חשבון או להתחבר כדי להשתמש בממשק, אבל אם יש עומס משתמשים במקביל, הפעולה עלולה להתעכב.

pip install -U huggingface_hub
hf download gokaygokay/Florence-2-SD3-Captioner

הקבצים

13 קבצים במאגר, 1.0 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• model.safetensors1.1 GB
• tokenizer.json1.4 MB
• vocab.json1.1 MB
• merges.txt456.3 KB
• modeling_florence2.py126.7 KB
• processing_florence2.py46.4 KB
• configuration_florence2.py15.1 KB
• README.md2.8 KB
• config.json2.4 KB
• .gitattributes1.5 KB
• LICENSE1.1 KB
• preprocessor_config.json806 B
• tokenizer_config.json34 B

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי כולל שימוש מסחרי והתאמה של הקוד. המידע על אופן שמירת התמונות שהעליתם בשרתי האחסון של השירות אינו מצוין בקוד האפליקציה.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗