gemini-codrawing

מה זה

האפליקציה מחברת בין לוח ציור פשוט מבוסס Canvas API לבין מודל יצירת התמונות המובנה של גוגל, Gemini 2.0. אתם נכנסים לממשק, בוחרים צבע מתוך בורר הצבעים, ומשרבטים סקיצה בסיסית של מה שאתם רוצים להמחיש. ליד הציור יש תיבת טקסט שבה כותבים הנחיה שמסבירה למודל מה אתם מנסים להראות או מה לבנות מסביב לשרבוט.

ברקע רצה אפליקציית Next.js שמטפלת גם בצד הלקוח וגם בנתיבי השרת מול ה־API של גוגל. ברגע ששולחים את הבקשה, המערכת מעבירה את הציור יחד עם הטקסט ישירות אל המודל, והוא מחזיר תמונה חדשה שמשלבת את הרעיון הוויזואלי שלכם עם ההרחבות שהוא ייצר. אין כאן מנגנוני עיבוד מקדימים מורכבים, אלא מעבר ישיר בין לוח השרבוט לבין הממשק של גוגל.

מתאים ל

• המחשת רעיונות ויזואליים

  שרבוט מהיר של קומפוזיציה בסיסית והפיכתה לתמונה מלאה בעזרת הנחיה טקסטואלית קצרה.

• בדיקת יכולות המודל

  התנסות ישירה באיך מודל Gemini 2.0 מפרש קלט ויזואלי גולמי בשילוב עם טקסט.

• יצירה משותפת

  ציור של אלמנט פשוט ובקשה מהמודל להשלים את הרקע או להוסיף פרטים סביבו.

איפה זה נופל

הבעיה המיידית היא שהאפליקציה קרסה ונמצאת במצב שגיאה, כך שנכון לעכשיו היא פשוט לא עובדת. מעבר לזה, מדובר בממשק מינימליסטי מאוד שמציע רק קנבס בסיסי ובורר צבעים, בלי שכבות, בלי מברשות מתקדמות ובלי שליטה על פרמטרים טכניים של המודל כמו זרעי יצירה או כמות שלבים. הציור שלכם ישמש כרפרנס כללי בלבד, והמודל עשוי לקחת חופש יצירתי מוחלט שישנה לחלוטין את מה שציירתם ביד.

איך משתמשים

כדי להתחיל, מציירים על גבי המסך עם העכבר או מגע, בוחרים צבעים שמתאימים לכם, מקלידים פרומפט טקסטואלי בתיבה הייעודית ולוחצים על כפתור השליחה. לפי התיעוד מדובר ביצירה בזמן אמת, אבל הממשק יושב כרגע על חומרת מעבד בסיסית, מה שאומר שהתגובה והעיבוד עשויים להיות איטיים יותר בהשוואה לשרתים עם מאיצים גרפיים.

חשוב לדעת שלפני שמנסים לעבוד איתה, סטטוס הריצה שלה מוגדר כשגיאת זמן ריצה (RUNTIME_ERROR). זה אומר שכרגע האפליקציה אינה פעילה ברשת ואי אפשר לייצר דרכה תמונות בפועל עד שהיוצר יתקן את התקלה ויפעיל אותה מחדש.

הרישיון

הקוד מופץ תחת רישיון apache-2.0. זהו רישיון קוד פתוח מתירני שמאפשר לכם להשתמש בקוד, לשנות אותו, לבנות עליו ולהפיץ אותו, גם לצרכים מסחריים. לגבי הציורים שאתם מעלים או התמונות שנוצרות, הרישיון לא מפרט תנאים ספציפיים, ולכן השימוש בהם כפוף ישירות לתנאי השירות ומדיניות הפרטיות של Google Gemini API שמייצר את הפלט בפועל.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗