OmniConsistency

קוד פתוח

showlabmit2025-05-29

זוגות של תמונות מקור ותמונות מעובדות בעשרים ושניים סגנונות אמנותיים, יחד עם תיאורי טקסט תואמים. המאגר נבנה כדי לאמן מודלים על שמירת עקביות ותרגום סגנון בין תמונות.

25.4 GBמשקל הקבצים
967הורדות בחודש
39לייקים

מה זה

המאגר מכיל זוגות תמונות מיושרים של מקור מול יעד מעובד סגנונית, לצד פרומפט טקסטואלי באנגלית שמתאר את הסגנון הרצוי. מקור התמונה יכול להיות צילום רגיל או איור קווי, ותמונת היעד מציגה את אותו התוכן בדיוק אך מעובד לפי אחד מעשרים ושניים סגנונות מוגדרים מראש, למשל סגנון גיבלי, פיקסל ארט, לגו, ואן גוך או אוריגמי.

המבנה מחולק לפי עשרים ושניים פיצולים נפרדים, כאשר כל סגנון אמנותי מהווה פיצול עצמאי משלו. ברמת הנתונים, כל רשומה כוללת נתיב לקובץ המקור, נתיב לקובץ היעד והפרומפט הטקסטואלי, כשבמאגר עצמו ישנם 7,861 קבצים הכוללים גם קובצי טקסט עם תיאורים בתיקיות ייעודיות לכל סגנון.

מתאים ל

העברת סגנון חזותי
אימון מודלים שמקבלים תמונה רגילה וממירים אותה לסגנון ציור או איור ספציפי.
למידת עקביות
פיתוח ארכיטקטורות ששומרות על מבנה האובייקטים והקומפוזיציה המקורית במעבר בין סגנונות.
יצירת תמונה מותנית בטקסט
שימוש בזוגות התמונות יחד עם הפרומפטים לשיפור מודלים המשלבים הנחיות טקסט לעיבוד תמונה.

איפה זה נופל

הכרטיס לא מציין מאיפה נלקחו תמונות המקור, איך בוצע העיבוד והאם נעשה שימוש במודלים גנרטיביים כדי לייצר את תמונות היעד. בנוסף, חסר מידע על גודל הקבצים המלא בדיסק או רזולוציית התמונות, והפרומפטים קיימים באנגלית בלבד. אם אתם מחפשים תמיכה בטקסטים בעברית או תמונות עם מאפיינים מקומיים, תצטרכו לאסוף ולהתאים נתונים כאלה בעצמכם.

שאלות
נפוצות

האם מותר להשתמש במאגר לפיתוח מוצר מסחרי?

כן, המאגר מופץ תחת רישיון MIT שמתיר במפורש שימוש מסחרי מלא. כל מה שנדרש מבחינה חוקית הוא לשמור על הודעת הרישיון המקורית של היוצרים. אין מגבלה על מכירת מוצרים או מודלים שנבנו בעזרתו.

האם יש במאגר תמיכה בעברית?

לא, הפרומפטים והתיאורים במאגר נכתבו באנגלית בלבד. אם המוצר שלכם מיועד לעבודה מול משתמשים בעברית, תידרשו לתרגם את הפרומפטים או להוסיף שכבת עיבוד שפה משלכם.

איך ניגשים לקובצי התמונות בפועל?

הטעינה דרך הקוד מספקת רק מחרוזות של נתיבים ולא את הביטים של התמונות עצמן. כדי לקבל את קובצי הגרפיקה יש לשבט את הריפו בעזרת כלי Git LFS ישירות למחשב או לשרת. לאחר מכן קוראים את הקבצים מהדיסק לפי הנתיב שמופיע ברשומה.

כיצד נאספו הנתונים שבמאגר?

יוצרי המאגר לא פירטו בכרטיס את מקור התמונות או את תהליך הסינון והיצירה שלהן. ידוע רק שהמאגר מחולק לעשרים ושניים סגנונות אמנותיים מוגדרים ושכל דוגמה מורכבת מתמונת מקור, תמונת יעד וטקסט. פרטים מעבר לכך לא פורסמו בעמוד הדאטהסט.

איך מריצים

טעינת הדאטהסט בספריית datasets מחייבת לציין פיצול ספציפי של סגנון, אחרת צריך לרוץ בלולאה על שמות הסגנונות כדי לעבור עליהם. השדות המוחזרים מכילים רק נתיבים לתמונות וטקסט, כך שכדי לגשת לקובצי התמונות עצמם חייבים לשבט את כל הריפוזיטורי באמצעות git lfs. אין צורך באישור גישה מיוחד, המאגר פתוח להורדה ישירה.

pip install -U huggingface_hub
hf download showlab/OmniConsistency

הקבצים

27 קבצים במאגר, 25.4 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

המאגר מפורסם תחת רישיון MIT, מה שמתיר שימוש חופשי כולל שימוש מסחרי, שינוי והפצה. התנאי היחיד הוא שמירת הודעת זכויות היוצרים והרישיון המקורי, והרישיון אינו כופה שיתוף של מודלים שאומנו עליו תחת אותו רישיון.

שימוש מסחרי
שינוי הקוד
הפצה מחדש

הרישיון המלא בעמוד המודל ↗