3d-model-playground

מה זה

גוררים קובץ תלת-ממד בפורמט GLB או GLTF ישירות לתוך הדפדפן, מפעילים את המצלמה והמיקרופון, ומזיזים את המודל בחלל. אפשר לשנות מצבי עבודה בדיבור, למשל להגיד drag, rotate, scale או animate, ואז לצבוט באצבעות מול המצלמה כדי לסובב, להגדיל או לגרור את האובייקט.

הקוד רץ כולו בצד לקוח ומשלב רינדור של Three.js יחד עם מודל זיהוי הידיים MediaPipe וזיהוי קולי דרך Web Speech API המובנה בדפדפן. הממשק משתמש במודלים של Quaternius כהדגמה בסיסית, ומשלב אלמנטים שנבנו עם Rosebud AI, כך שהכל קורה מקומית על המחשב שלכם בלי שרת עיבוד ברקע.

מתאים ל

• בדיקת מודלים מותאמים

  גרירת קובצי GLB או GLTF כדי לראות איך הם מתנהגים באינטראקציה טבעית של מחוות ידיים.

• הדגמות ומצגות

  הצגת מודלים תלת-ממדיים לקהל בלי לגעת בעכבר או במקלדת, באמצעות פקודות קול ותנועות ידיים.

• בסיס לפיתוח ממשקים

  שימוש בקוד המקור הפתוח כדי לבנות ממשקי שליטה נטולי מגע באפליקציות רשת אחרות.

איפה זה נופל

זה ניסוי אינטראקטיבי ולא כלי עבודה מקצועי. הפקודות הקוליות מוגדרות רק באנגלית למילים ספציפיות מאוד, והן תלויות לחלוטין באיכות המיקרופון וביכולות של הדפדפן. בנוסף, מעקב הידיים רגיש מאוד לתאורה בחדר, והשליטה מוגבלת למודלים בסיסיים בפורמט GLB או GLTF בלי יכולות עריכה מתקדמות.

איך משתמשים

נכנסים לדמו בדפדפן מודרני שתומך ב־WebGL, מאשרים גישה למצלמה ולמיקרופון, ומתחילים לעבוד מיד. אין צורך בהרשמה, אין תור, ואין שרת מרוחק שמחכים לו, כי מדובר באתר סטטי לחלוטין. אם המחשב שלכם מתקשה להריץ מעקב וידאו מקומי לצד רינדור תלת-ממד, אתם תרגישו ירידה בקצב הפריימים.

הרישיון

הפרויקט מופץ תחת רישיון MIT פתוח, שמאפשר שימוש חופשי, שינוי והפצה גם לצרכים מסחריים. הקבצים שאתם גוררים לדפדפן לא נשלחים לשום שרת חיצוני ונשארים אצלכם במחשב.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש

הרישיון המלא ב־Hugging Face ↗