custom-diffusion
רץ בדפדפןnupurkmr9רישיון לא דווח2022-12-16
הדגמה לאימון והרצה של מודלי תמונה מותאמים אישית מבוססי סטייבל דיפיוז'ן ישירות בדפדפן. מתאימה ליוצרים ומפתחים שרוצים ללמד סגנון או מושג חדש מקבצים משלהם.
- —הורדות בחודש
- 108לייקים
מה זה
אתם מעלים תמונות של המושג שתרצו ללמד, מגדירים פרומפט מתאים ובוחרים מודל בסיס מתוך שתי אפשרויות, CompVis/stable-diffusion-v1-4 או stabilityai/stable-diffusion-2-1-base. אפשר להגדיר רזולוציה של 512 או 768 פיקסלים, להוסיף מושגים נוספים במקביל, ולקבוע פרמטרים כמו קצב למידה, כמות צעדי אימון ושימוש באופטימייזר 8bit Adam.
בסיום האימון מקבלים קובצי משקולות מוכנים. משם עוברים ללשונית יצירה, טוענים את המשקולות החדשות, מזינים פרומפט רגיל, ומקבלים תמונה שמשלבת את הנושא שלמדתם עם פרמטרים של מספר צעדים ו־CFG Scale. קיים גם ממשק ייעודי להעלאת התוצאה הסופית ישירות לחשבון שלכם.
מתאים ל
- אימון אובייקט אישי
הזנת תמונות של פריט מסוים ויצירת תמונות שלו בסביבות חדשות לפי תיאור טקסטואלי.
- הטמעת סגנון אמנותי
לימוד מודל הבסיס סגנון ציור או איור ייחודי מתוך קבוצת קבצים קטנה.
- העלאת משקולות לרשת
שמירה ושליחה של קובצי האימון ישירות לחשבון Hugging Face באמצעות טוקן אישי.
איפה זה נופל
הבעיה המיידית היא שההדגמה נמצאת במצב שגיאת בנייה ולכן אינה עובדת כלל כרגע. מעבר לכך, אימון מודלים על מעבד גרפי ברמת T4 הוא תהליך כבד ואיטי, וכל ניתוק מקרי עלול לעצור את התהליך באמצע. אם תרצו תוצאות מהירות או עבודה יציבה בלי תלות בשגיאות של השרת, עדיף להריץ את הקוד באופן מקומי על חומרה מתאימה.
שאלות
נפוצות
האם השימוש באפליקציה כרוך בתשלום?
השימוש בממשק עצמו מוצע בחינם דרך האתר. עם זאת, נכון לעכשיו הוא לא זמין להרצה בגלל תקלת מערכת. אם הממשק יחזור לפעול, השימוש הבסיסי בחומרה המוקצית אינו דורש תשלום נוסף.
כמה זמן לוקח לאמן מודל?
האימון מתבצע על מעבד t4-medium ונמשך בדרך כלל בין כמה עשרות דקות ליותר משעה. משך הזמן תלוי ישירות במספר התמונות שהעליתם ובכמות צעדי האימון שבחרתם. כל עוד היישום תקוע בשגיאה, אי אפשר למדוד זמנים בפועל.
מה קורה עם התמונות והקבצים שמעלים?
הקבצים מועלים אל השרת הזמני שמריץ את התהליך ומייצר את המשקולות. הממשק מאפשר להוריד את קובצי התוצאה למחשב או לדחוף אותם לחשבון האישי שלכם עם טוקן מתאים. שרתים מהסוג הזה לרוב מנקים קבצים מקומיים לאחר סיום הפעילות או אתחול.
האם אפשר להריץ את זה מקומית?
כן, הקוד מבוסס על ספריות פתוחות כמו Gradio ו־PyTorch וניתן לשכפול מהמאגר. תצטרכו מחשב עם כרטיס מסך מתאים והתקנה של התלויות המופיעות בקוד. הרצה מקומית תעקוף את שגיאת הבנייה שקיימת כרגע בעמוד המקוון.
איך משתמשים
התהליך מחולק לשלוש לשוניות: אימון, בדיקה והעלאה. בלשונית הראשונה מעלים את התמונות, מגדירים ערכים ולוחצים על כפתור תחילת האימון, עם אפשרות לבדוק את הסטטוס בזמן אמת. אחרי שהקבצים מוכנים, עוברים ללשונית הבדיקה, בוחרים את המשקולות, ולוחצים על יצירת תמונה. כדי להעלות את התוצר החוצה נדרש טוקן אישי. השרת מוגדר על חומרת t4-medium, אבל כרגע לא ניתן להריץ דבר בדפדפן בגלל שגיאת בנייה פעילה שמונעת מהממשק להיטען.
הרישיון
הרישיון של היישום לא דווח במאגר. ללא רישיון מוגדר לא ברור האם מותר להשתמש בקוד לפרויקטים מסחריים או מה המעמד החוקי של המשקולות שנוצרות בו. מודלי הבסיס עצמם כפופים לתנאי השימוש המקוריים של סטייבל דיפיוז'ן.