חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
W

waypoint-1-small

רץ בדפדפן

Overworldרישיון לא דווח2026-01-18

  • gradio

הדגמה אינטראקטיבית שיוצרת עולם חזותי בזמן אמת ונשלטת באמצעות מקלדת ועכבר. היא מיועדת למי שרוצה לבדוק מודלי דיפוזיה שמייצרים סביבות תנועה רציפות בדפדפן.

  • —הורדות בחודש
  • 65לייקים

מה זה

הממשק מציע סביבה דמוית משחק. אתם בוחרים תמונת פתיחה מתוך גלריה קיימת, מעלים תמונה משלכם, או משאירים את הבחירה ריקה כדי לקבל עולם אקראי. בנוסף אפשר להזין תיאור טקסטואלי, כשהברירת מחדל היא עולם שניתן לחקור אותו. ברגע שמפעילים את ההדגמה, המערכת מייצרת רצף פריימים ויזואלי ומציגה מונה פריימים וקצב תמונות לשנייה.

מאחורי הקלעים רץ מודל בשם world engine modular או גרסה מקומפלת של waypoint 1 small מבית Overworld. הקוד משתמש בספריית diffusers של Hugging Face בגרסה מודולרית מותאמת, יחד עם טעינת aoti שנועדה לייעל את זמן הריצה. השליטה נעשית דרך רכיב HTML שלוכד תנועות עכבר ולחיצות מקשים ומעביר אותם כמצב שליטה למודל בזמן אמת.

מתאים ל

  • ניסוי שליטה במודל עולם

    בדיקה של האופן שבו קלט מקלדת ועכבר מנווט סביבה שמיוצרת בדיפוזיה רציפה.

  • בדיקת תמונות כעולמות

    העלאת תמונה סטטית ובחינה כיצד המודל ממשיך ממנה תנועה במרחב לפי תיאור טקסט.

  • התרשמות מביצועי AOT

    בחינת קצב הפריימים שמפיק מודל קטן ומקומפל בזמן אמת על גבי מעבד a10g.

איפה זה נופל

זו הדגמת מודל מחקרי ולא מנוע משחק מלא. התנועה מייצרת עיוותים חזותיים אופייניים למודלי דיפוזיה, ואין פה עולם עקבי פיזיקלית או זיכרון מרחבי יציב לאורך זמן. ברגע שזזים, הסביבה מתעדכנת על בסיס חיזוי פריים אחר פריים ולא על בסיס מודל תלת ממדי אמיתי.

נעילת המקשים והעכבר בדפדפן עלולה להרגיש מסורבלת או לקפוא אם יש עומס ברשת או נפילה בקצב הפריימים של השרת.

שאלות
נפוצות

האם השימוש באפליקציה עולה כסף?

האפליקציה פתוחה לשימוש חופשי בדפדפן דרך Hugging Face Spaces. החומרה ממומנת על ידי יוצרי המרחב במסגרת הקצאת zero a10g. אין צורך לשלם או להזין פרטי אשראי כדי להפעיל אותה.

מה קורה לקבצים שאני מעלה?

התמונות שאתם מעלים משמשות כקלט ישיר לזיכרון הריצה של המודל כדי לייצר את הפריימים הראשונים. הן מעובדות על גבי השרת שמריץ את המרחב. מאחר שהרישיון ותנאי הפרטיות לא פורטו, עדיף לא להעלות חומרים פרטיים או רגישים.

כמה זמן לוקח להתחיל תנועה?

אם שרת הגיבוי מסוג zero a10g נמצא במצב שינה, תידרש המתנה של דקה או שתיים עד שהוא יידלק. לאחר הטעינה הראשונית, לחיצה על כפתור ההתחלה מפעילה את הלולאה תוך שניות בודדות. קצב הפריימים מוצג בזמן אמת על המסך.

האם אפשר להריץ את הקוד על המחשב בבית?

הקוד עצמו נשען על קובצי diffusers ומודלים מותאמים שנטענים מרחוק. כדי להריץ אותו מקומית תצטרכו כרטיס מסך תומך עם מספיק זיכרון וידאו, התקנת ספריות PyTorch וקומפילציית AOT מתאימה. ללא מאיץ גרפי ייעודי המודל לא יזוז בקצב סביר.

במה הדף הזה שונה משימוש ישיר במודל?

המרחב הזה מספק מעטפת אינטראקטיבית שכוללת לכידת מקלדת, תצוגת וידאו רציפה וטיימר של 30 פריימים בשנייה. שימוש ישיר במודל דורש כתיבת קוד שמזין בכל פעם וקטור פעולה ומקבל פריים בודד. כאן הממשק סוגר את הלולאה לתוך חוויה דמוית משחק.

איך משתמשים

טוענים תמונת בסיס או בוחרים מהגלריה, מכניסים טקסט אם רוצים, ולוחצים על Start Game. הממשק נועל את העכבר והמקלדת לצורך ניווט, ומשחררים אותם בכל רגע בלחיצה על מקש ESC. כדי לעצור לחלוטין לוחצים על End Game או מאפסים עם Restart World.

הקוד מגדיר טיימר של 30 פריימים בשנייה ומריץ את התהליך על מאיץ מסוג zero a10g. החומרה הזו נדלקת לפי דרישה, כך שאם היא כבויה תצטרכו להמתין לעליית השרת, אך בזמן ריצה היא מספקת כוח עיבוד חזק יחסית לעיבוד וידאו שוטף.

הרישיון

הרישיון של הפרויקט לא דווח במאגר. המשמעות היא שאין הרשאה מפורשת לשימוש מסחרי, ומומלץ להתייחס לריצה הזו כהתנסות אישית ומחקרית בלבד. כל תמונה שאתם מעלים מועברת ישירות לשרת שמריץ את הקוד.

הרישיון המלא ב־Hugging Face ↗