Toonify yourself by Justin Pinkney

הסקירה

מעלים תמונת פנים ברורה, מקבלים ייצוג מספרי שלה, וממירים אותה לדמות שנראית כמו גיבור מצויר של אולפני Dreamworks או Disney. הכלי הזה, שפותח על ידי Justin Pinkney יחד עם Doron Adler, מבצע שילוב שכבות ברשתות StyleGAN2 כדי לקחת תווי פנים אמיתיים ולעצב אותם מחדש. במקום להלביש פילטר צבעוני פשוט, הוא מחשב וקטור חבוי בתוך מודל פנים רחב, ואז מייצר את הפנים מתוך מודל שעבר אימון על דמויות מצוירות. התוצאה שומרת על התאורה, המרקם והזהות של האדם המקורי, אבל מעוותת את הפרופורציות לצורת עיניים גדולות ומבנה ראש אופייני לאנימציה תלת ממדית.

המנגנון כולו מסתמך על מחברת Colab של Google או על אתר ייעודי שנבנה בהמשך ומאפשר להריץ את התהליך בכמה שניות. הממשק המקורי דורש סביבת עבודה טכנית שבה מריצים תאי קוד עצמאיים כדי לחלץ את התמונה ולהזין אותה למודלים הממוזגים. אין פה כפתורים פשוטים למי שאינו מבין מעט בעבודה עם מחברות פיתוח מקוונות.

איך המיזוג עובד בפועל

מה שבאמת מפריע כאן הוא שאין מדובר בכלי פרודוקטיבי אמיתי אלא בניסוי מחקרי חזותי שמתאים בעיקר לשעשוע או ליצירת תמונת פרופיל ייחודית. Doron Adler אימן מודל פנים קיים על בסיס נתונים מצומצם של כ־300 תמונות דמויות בלבד. בגלל שהמאגר הזה הכיל שילוב מקרי של ציורי יד, דגמי תלת ממד ותמונות ברזולוציה נמוכה, המודל המקורי יצר תוצאות גרועות וחסרות אחידות. הפתרון של Justin Pinkney היה לקחת את השכבות הנמוכות מהמודל המצויר, שקובעות את מבנה הפנים, ולשלב אותן עם השכבות הגבוהות של המודל המקורי, שמטפלות במרקם העור ובתאורה.

התוצאה מפתיעה לטובה.

מי שמחפש פתרון לעבודה יומיומית, למשל יצירת סדרת איורים שיווקיים עקבית, יגלה מהר מאוד את הגבולות הקשיחים. המודל מתמקד בפנים בלבד, ולא יודע להתמודד עם פלג גוף עליון, רקעים מורכבים, תנוחות חדות או הבעות פנים שחורגות ממבט ישיר למצלמה. אם תעלו תמונה מטושטשת או כזו שכוללת משקפיים ואביזרים כבדים, התוצאה שתקבלו תהיה מרוחה וחסרת שימוש. לא הייתי משתמש בזה לפרויקט מקצועי עם דרישות גרפיות קפדניות.

כמה זה עולה ואיפה זה עובד

מבחינת כסף, בעמוד המקורי של המחקר לא צוין מחיר ולא קיים מחירון מסודר. המחברת שפורסמה בחינם מנצלת את משאבי העיבוד של Colab, כך שכל עוד יש לכם חשבון Google תוכלו להריץ את הקוד ללא תשלום ישיר למפתח. אין התחייבות, אין כרטיס אשראי, ואין הבטחה לגבי זמינות עתידית של שרתי העיבוד החינמיים. באתר הנפרד שהוקם בהמשך הדברים עשויים להיות שונים, אך בעמוד הנוכחי העבודה מתבצעת כולה בקוד פתוח. תצטרכו להביא רק את התמונה שלכם ואת הזמן שנדרש להמתין לעיבוד.

הממשק פועל באנגלית בלבד.

עבור משתמשים בישראל, היעדר התמיכה בשפה העברית אינו מהווה מכשול ממשי כי מדובר בעיבוד קובצי תמונה ולא בניתוח טקסט. עם זאת, כל ההוראות הטכניות במחברת Colab מנוסחות באנגלית טכנית, כך שמי שאינו שולט במונחי תכנות בסיסיים יתקשה להבין היכן להדביק את התמונה ואיך להוריד את התוצאה המוגמרת. אין שום התאמה לרגולציה מקומית, אין שירות לקוחות לפנות אליו במקרה של תקלה, ואין שום מנגנון שמוחק את התמונה שלכם באופן אוטומטי אם בחרתם להעלות אותה לסביבה שיתופית.

הכלי שווה את זה רק אם אתם סקרנים לגבי היכולות של מודלי StyleGAN2 או רוצים ליצור תמונת אווטאר חד פעמית. יוצרי תוכן או אנשי שיווק שמחפשים כלי עבודה יציב יבזבזו כאן זמן יקר.

• מחיר בסיסלא צוין באתר
• שימוש חינמיזמין דרך Colab
• ממשק עבריאין תמיכה