GPT
L

Lumina-Image-2.0 — הדגמה

קוד פתוח

Alpha-VLLMapache-2.02025-02-08

  • gradio

מייצרים תמונות מטקסט ישירות בדפדפן דרך ממשק פשוט. מתאים למי שרוצה לבדוק שילובים של מודלי שפה וראייה בלי להרים סביבת פיתוח.

  • 2.6Bפרמטרים
  • 29.5 GBמשקל הקבצים
  • הורדות בחודש
  • 152לייקים

מה זה

אתם כותבים תיאור טקסטואלי, מוסיפים הנחיות שליליות אם צריך, ובוחרים רזולוציה ומספר צעדי דגימה. בתמורה מקבלים קובץ תמונה ואת כל נתוני הריצה במבנה מסודר. הממשק כולל גם דוגמאות מובנות שמראות איך להגדיר את הפרמטרים נכון.

מאחורי הקלעים הקוד משלב כמה רכיבים שונים. הוא משתמש בטוקנייזר של gemma-2-2b של גוגל להבנת הטקסט, ב־VAE של FLUX.1-dev לעיבוד התמונה, ובמודל Lumina-Image-2.0 יחד עם רכיבי PixArt-Sigma כדי לבצע את תהליך היצירה עצמו. יש כאן גם שליטה מתקדמת על שיטות פתרון, גודל צעדים ושיטות מתיחה לרזולוציה.

מתאים ל

  • בדיקת איכות יצירת תמונות

    מזינים תיאור מפורט ובודקים איך המודל מתמודד עם סגנונות שונים ברזולוציות מגוונות.

  • ניסוי פרמטרים טכניים

    משנים ערכי דילול, גודל צעדים ומקדמי דגימה כדי לראות את ההשפעה הישירה על התוצאה.

  • בחינת תאימות לחיבור מקומי

    בודקים את יציבות המודל והמבנה שלו לפני שמורידים את המשקלים למחשב האישי.

איפה זה נופל

הבעיה המרכזית כרגע היא טכנית לחלוטין. האפליקציה מדווחת על תקלה בריצה, כך שהיא לא שמישה בדפדפן עד שהיוצרים יתקנו את הקוד או את מפתחות הגישה. בנוסף, היא מיועדת רק ליצירת תמונות מהנחיות טקסט ולא תאפשר לכם להעלות תמונה קיימת כדי לערוך אותה או לשנות בה אזורים ספציפיים.

שאלות
נפוצות

האם השימוש בעמוד עולה כסף?

הגישה לממשק היא בחינם ואינה דורשת תשלום. עם זאת, נדרשת זמינות של שרתי הבדיקה כדי שהרצת המודל תעבוד בפועל.

למה מופיעה שגיאה כשאני מנסה לייצר תמונה?

האפליקציה נמצאת במצב שגיאת ריצה שנובעת מתקלה בטעינת הקוד או המודלים ברקע. עד שהמפתחים יעדכנו את השרת, אי אפשר להפיק דרכה תמונות.

האם אפשר להריץ את זה על המחשב שלי?

כן, הקוד מבוסס על ספריות פתוחות ורישיון חופשי, כך שניתן למשוך את הקבצים ולהריץ אותם מקומית. לשם כך תצטרכו כרטיס מסך מתאים והתקנה של החבילות הנחוצות.

מה קורה לטקסטים שאני מזין פנימה?

הפרמטרים מועברים ישירות לסקריפט הריצה של ההדגמה ומחזירים קובץ נתונים בעמוד. אין כאן מנגנון שמירת קבצים חיצוני שמתועד בקוד.

איך מריצים

בפועל ממלאים את שדות הטקסט, מכוונים את הסליידרים להגדרות כמו סיד ויחס דגימה, ולוחצים על כפתור השליחה. התהליך מציג מד התקדמות בזמן אמת. המערכת מוגדרת לרוץ על חומרת zero-a10g שמקצה מעבד גרפי לפי דרישה, אבל כרגע לא תצליחו להפיק ממנה כלום כי העמוד נמצא במצב של שגיאת ריצה מתמשכת ולא מגיב לפקודות.

pip install -U huggingface_hub
hf download Alpha-VLLM/Lumina-Image-2.0

הרישיון

הקוד מופץ תחת רישיון apache-2.0, שמאפשר שימוש חופשי כולל שינויים והפצה מסחרית. לגבי התמונות שנוצרות, כדאי לבדוק גם את תנאי השימוש של רכיבי הבסיס כמו FLUX.1-dev שנטענים בזמן הריצה.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש
  • שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗