OminiControl — הדגמה

קוד פתוח

Yuanshiרישיון לא דווח2024-11-25

gradio

הדגמה שיוצרת תמונות מונחות אובייקט על בסיס תמונת מקור ותיאור טקסטואלי. היא מיועדת למי שרוצה לשמור על מראה של פריט או דמות בתוך סצנה חדשה לגמרי.

263 MBמשקל הקבצים
—הורדות בחודש
944לייקים

מה זה

מעלים תמונת מקור של אובייקט, בוחרים רזולוציה דרך כפתורי בחירה, כותבים תיאור טקסט של שתי שורות ומקבלים תמונה חדשה. הממשק כולל דוגמאות מוכנות שאפשר להפעיל בלחיצה כדי לראות איך ההתניה עובדת.

מתחת למכסה המנוע רץ צינור עיבוד שמבוסס על FLUX.1-schnell של Black Forest Labs יחד עם מודל השליטה Yuanshi/OminiControl. הקוד טוען גם את Depth Anything ליצירת מפות עומק, כך שהמערכת מחלצת מאפיינים מבניים מהתמונה שהזנתם ומזריקה אותם ישירות לתהליך היצירה של פלוקס.

מתאים ל

העברת אובייקט לסצנה חדשה
מעלים תמונה של חפץ או דמות וכותבים תיאור רקע שונה לגמרי כדי לקבל אותו בהקשר חדש.
בדיקת יכולות FLUX מונחה
בוחנים איך מנגנון OminiControl מתמודד עם שמירה על פרטים לעומת פתרונות בקרה אחרים.
התנסות מהירה בדוגמאות
מריצים בלחיצה את הדוגמאות המובנות כדי להבין את רמת הדיוק של המודל בלי להכין תמונות מראש.

איפה זה נופל

בקוד מופיעות לשוניות מסומנות בהערה עבור תכונות כמו מילוי, קווי מתאר של קאני ועומק, עם הכיתוב שזה יגיע בקרוב. זה אומר שבפועל הממשק הנוכחי מציע רק את מנגנון יצירת התמונה המונחית, ולא חבילת עריכה שלמה. בנוסף, חומרת שיתוף ציבורית עלולה לזרוק אתכם לתור אם יש עומס ברשת.

שאלות
נפוצות

האם השימוש בהדגמה עולה כסף?

לא. מדובר במרחב ציבורי שרץ ברשת ומאפשר התנסות ישירה דרך הדפדפן ללא תשלום.

כמה זמן לוקח לכל תמונה להיווצר?

המודל מבוסס על FLUX.1-schnell שמתוכנן למספר צעדים נמוך, ולכן היצירה עצמה אורכת שניות בודדות. אם השרת היה כבוי, תיתכן המתנה קצרה נוספת של עשרות שניות עד שהמעבד הגרפי מוקצה ונטען.

האם כל היכולות של הפרויקט זמינות כאן?

לא. חלק מהתכונות כמו מילוי מחדש ובקרת עומק ייעודית מופיעות בקוד כמנוטרלות תחת הערות, כך שכאן מוצגת בעיקר יכולת ההתניה לפי תמונת נושא.

איך מריצים

טוענים תמונה, מקלידים פרומפט ולוחצים על Run. הממשק רץ על חומרת zero-a10g של האגינג פייס באמצעות ספריית spaces, מה שאומר שהכרטיס הגרפי מוקצה לפי דרישה. ייתכן שתמתינו כמה שניות עד שהחומרה תתעורר אם לא היה שימוש רציף, אבל מרגע שהיא פעילה, FLUX.1-schnell מייצר תוצאות במהירות של מודל מהיר.

pip install -U huggingface_hub
hf download Yuanshi/OminiControl

הקבצים

10 קבצים במאגר, 263 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הרישיון של המרחב לא דווח במפרט. המשמעות היא שאין הרשאה ברורה ומפורשת לשימוש מסחרי בקוד או בתוצרים, וכדאי לבדוק בנפרד את תנאי השימוש של מודל הבסיס FLUX.1-schnell לפני שמשלבים תוצרים בפרויקטים עסקיים.

הרישיון המלא בעמוד המודל ↗