tight-inversion-pulid-demo
רץ בדפדפןtight-inversionרישיון לא דווח2025-03-05
הדגמה שמשלבת תמונת פנים עם תיאור טקסטואלי כדי לייצר דיוקנאות מותאמים. היא פונה למי שרוצה לבדוק שילוב זהויות בתוך מודלי תמונה מודרניים.
- —הורדות בחודש
- 67לייקים
מה זה
מעלים תמונת פנים יחידה ומקלידים הנחיית טקסט לעריכה או סגנון, כמו מראה קולנועי צבעוני. המערכת מחזירה תמונה חדשה שבה תווי הפנים מהקובץ המקורי אמורים להשתלב בסצנה שתוארה. יש גם דוגמאות מובנות שמציגות שילובי הנחיות ופרצופים עם ערכי ברירת מחדל.
מאחורי הקלעים הקוד מתבסס על PuLID יחד עם תשתית FLUX.1-dev וטכניקות של היפוך זרימה רקורסיבי (RF Inversion). הוא נשען על חבילה שלמה של מודלים תומכים, כולל מודלי CLIP שונים של LAION וזיהוי פנים עם antelopev2, כדי לחלץ את מאפייני הזהות ולכוון את הציור בהתאם להנחיות.
מתאים ל
- בדיקת שמירת זהות בדיוקן
בוחנים איך תווי פנים מתצלום קיים משתלבים בהנחיות טקסט שונות עם FLUX.
- ניסוי בפרמטרי היפוך זרימה
משחקים עם הגדרות eta, gamma ומשקל זהות כדי לראות את ההשפעה על התמונה.
- השוואת הנחיות מול דוגמאות
טוענים את הדוגמאות המוכנות ובודקים איך ניסוח הטקסט משפיע על התוצאה.
איפה זה נופל
הבעיה המיידית היא שההדגמה פשוט לא רצה כרגע בגלל שגיאת שרת. מעבר לזה, מדובר בהדגמה מורכבת שמכילה המון פרמטרים מתקדמים כמו היפוך זרימה וסולמות CFG שונים. אם לא מכירים את המתמטיקה של המודל קל מאוד לקבל עיוותים בפנים, אי התאמה להנחיה או תוצאה מטושטשת.
שאלות
נפוצות
האם השימוש בהדגמה עולה כסף?
לא, הגישה לממשק היא ללא תשלום. כל מה שצריך זה דפדפן, בלי צורך במנוי.
למה מופיעה שגיאה כשאני מנסה להשתמש בה?
המרחב נמצא כרגע במצב של תקלת הרצה. השרת שמחזיק את הקוד קרס או לא הצליח להיטען, ולכן הכפתורים לא מייצרים תמונות בפועל.
מה קורה עם תמונות הפנים שמעלים לממשק?
התמונות נשלחות ישירות לזיכרון של השרת שמריץ את ההדגמה כדי לחלץ את תווי הפנים. מאחר שלא צוינה מדיניות פרטיות או רישיון, עדיף לא להעלות לשם תמונות פרטיות או רגישות.
האם אפשר להריץ את הכלי הזה במחשב האישי?
כן, הקוד מבוסס על ספריות פתוחות כמו PuLID ו־FLUX. עם זאת, תצטרכו כרטיס מסך חזק מאוד עם זיכרון ייעודי גבוה כדי להחזיק את כל המודלים האלה מקומית.
איך משתמשים
בפועל בוחרים תמונה, כותבים הנחיה, משנים אם רוצים את משקל הזהות או כמות הצעדים, ולוחצים על כפתור Generate. החומרה שהוגדרה להרצה היא כרטיס zero-a10g, מה שאמור לספק תוצאות תוך שניות בודדות לכל סבב. עם זאת, נכון לעכשיו העמוד מדווח על שגיאת ריצה (RUNTIME_ERROR), כך שאי אפשר להפיק בו תמונות ישירות בדפדפן עד שהמפתח יתקן את הבעיה.
הרישיון
הרישיון של המרחב עצמו לא דווח ולא צוין בקוד. המשמעות היא שאין הרשאה ברורה לשימוש מסחרי בקוד או בתוצרים שלו, וצריך לבדוק בנפרד את הרישיונות של המודלים הפנימיים כמו FLUX.1-dev לפני שעושים בהם שימוש כלשהו.