Tar-7B — הדגמה

מה זה

הממשק מחולק לשתי לשוניות עיקריות. בלשונית הראשונה מקלידים תיאור טקסטואלי ומקבלים תמונה ברזולוציה של 512 או 1024 פיקסלים, עם שליטה במדדי דגימה כמו טופ פי, טופ קיי וסקאלת הכוונה. ברירת המחדל מציגה פרומפט ליצירת תוכי מסוג מקאו. בלשונית השנייה מעלים תמונה, שואלים עליה שאלה קצרה בטקסט, ומקבלים תשובה מילולית, כאשר ברירת המחדל מציגה תמונה של כלב וחתול ובקשה לתאר אותה.

מאחורי הקלעים רץ שילוב של מספר מודלים וטוקנייזרים. התשתית מסתמכת על משקלי Tar-7B יחד עם רכיבי Tar-TA-Tok שממירים תמונות וייצוגים חזותיים לטוקנים שמתואמים עם טקסט, לצד שימוש במפענח של לאמה גן. המטרה של הפרויקט לפי החוקרים היא לאחד הבנה ויצירה חזותית ברשת אחת במקום להחזיק שני מודלים נפרדים לחלוטין למשימות שונות.

מתאים ל

• בדיקת הבנת תמונה

  מעלים תמונה ומקלידים הנחיה באנגלית לקבלת תיאור תמציתי של הפרטים בה.

• יצירת תמונה מטקסט

  מזינים תיאור מילולי ובוחרים רזולוציה כדי לבדוק איך המודל מתרגם מושגים לתמונה.

• כוונון פרמטרי דגימה

  משנים ערכי טופ קיי וסקאלת הכוונה כדי לראות את ההשפעה על התמונה הנוצרת.

איפה זה נופל

הבעיה המרכזית כרגע היא שההדגמה מסומנת במצב של שגיאת הגדרה, כך שסביר שהיא כלל לא תרוץ בדפדפן עד שיוצרי המרחב יתקנו את התלויות. מעבר לכך, התאמת הטוקניזציה המשותפת לא בהכרח מגיעה לאיכות של מודלי דיפוזיה ייעודיים ביצירת תמונות, והרזולוציות מוגבלות רק לערכים שנקבעו מראש. המודל גם אומן על אנגלית לפי הדוגמאות, כך שאין ערובה להבנה של עברית.

איך מריצים

לוחצים על כפתור היצירה בכל לשונית כדי לשלוח את הבקשה. התשתית מוגדרת להשתמש בחומרת זירו איי עשר ג'י דרך האגים פייס, מה שאומר שהמאיץ הגרפי מתעורר רק כשיש פנייה. אם יש עומס ייתכן שתמתינו בתור למשאבים, אך כרגע אין צורך בהתחברות מיוחדת או בחשבון בתשלום כדי להזין נתונים.

pip install -U huggingface_hub
hf download ByteDance-Seed/Tar-7B

הקבצים

16 קבצים במאגר, 16.2 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

• model-00003-of-00004.safetensors5.0 GB
• model-00002-of-00004.safetensors4.9 GB
• model-00001-of-00004.safetensors4.9 GB
• model-00004-of-00004.safetensors2.6 GB
• tokenizer.json23.5 MB
• tokenizer_config.json11.5 MB
• vocab.json2.8 MB
• asset/demos.png2.3 MB
• merges.txt1.7 MB
• added_tokens.json1.4 MB
• model.safetensors.index.json91.6 KB
• README.md2.2 KB
• config.json1.9 KB
• .gitattributes1.7 KB
• special_tokens_map.json613 B
• generation_config.json243 B

הרישיון

הפרויקט פורסם תחת רישיון אפאצ'י שתיים אפס, שמתיר שימוש חופשי ושינוי של הקוד כולל שימוש מסחרי לפי תנאי הרישיון. עם זאת, התוכן שמועלה או נוצר עובר דרך שרתי הענן שמארחים את המרחב, ולכן לא מומלץ להעלות קבצים סודיים או מידע אישי ורגיש.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא בעמוד המודל ↗