point-e
רץ בדפדפןopenaiרישיון לא דווח2022-12-20
openai עומדים גם מאחורי Sora, ויש עליו סקירה כאן.
הופך תיאור טקסטואלי פשוט לענן נקודות תלת ממדי ישירות בדפדפן. מתאים למפתחים וחוקרים שרוצים לבדוק ייצור גיאומטריה מהיר בלי להתקין ספריות מקומיות.
- —הורדות בחודש
- 533לייקים
מה זה
אתם מקלידים הנחיית טקסט באנגלית ומקבלים גרף אינטראקטיבי של ענן נקודות בתלת ממד שמוצג באמצעות ספריית Plotly. הממשק מאפשר לסובב את התוצאה ולבחון את המבנה המרחבי שנוצר מתוך המילים.
מאחורי הקלעים רצים שני מודלים של דיפוזיה מבית OpenAI. הראשון מייצר ענן נקודות בסיסי מתוך הטקסט, והשני מבצע עליו הגדלה ועידון כדי להוסיף צפיפות לנקודות. לפי התיעוד של המפתחים בקוד, ההדגמה הזו משתמשת דווקא בגרסה קטנה ופחות איכותית של המודל כדי לייצר תוצאה ישירות מטקסט, כך שהרזולוציה נמוכה מזו שמתקבלת במחקר המלא.
מתאים ל
- בדיקת היתכנות לטקסט
בוחנים איך מודל דיפוזיה מתרגם מילים בסיסיות למבנה גיאומטרי מרחבי ראשוני.
- המחשת ענני נקודות
צופים ישירות במבנה של נקודות בתלת ממד בלי לייצא קבצים לתוכנות כבדות.
- ניתוח ארכיטקטורת קוד
לומדים מהקוד איך לחבר מודל בסיס יחד עם מודל השבחה בצינור עבודה יחיד.
איפה זה נופל
התוצר הוא רק ענן נקודות ולא מודל תלת ממדי מלא עם פאות, טקסטורות או קבצי תלת ממד להורדה. בנוסף, המפתחים עצמם מבהירים שההדגמה רצה על מודל מוקטן ואיטי באיכותו, כך שאי אפשר להסיק ממנה על היכולת המלאה של הפרויקט. נכון לעכשיו התקלה הטכנית מונעת לחלוטין כל שימוש.
שאלות
נפוצות
למה ההדגמה לא מגיבה כרגע?
היישום נמצא במצב של שגיאת ריצה בשרת המארח. עד שהמפתחים יעדכנו את הקוד או יאתחלו את הסביבה, אי אפשר להריץ שאילתות ולקבל תוצאות. מומלץ לבדוק את מחברת הקוד החיצונית שקושרה במקום.
האם מקבלים קובץ תלת ממד להדפסה?
לא, הפלט הוא גרף של ענן נקודות בלבד שמוצג על המסך. אין כאן יצירה של רשת מצולעים, טקסטורה או קבצים סטנדרטיים שמתאימים למדפסות ולמנועי משחקים. כדי להגיע לזה צריך שלבי עיבוד נוספים שלא קיימים בממשק.
אפשר להריץ את המודל על המחשב האישי?
כן, הקוד הציבורי של הפרויקט ומחברות הדוגמה זמינים בריפו המקורי בגיטהאב. לשם כך תצטרכו סביבת פייתון מקומית עם תמיכה בכרטיס מסך מתאים. ההרצה המקומית מאפשרת גם להשתמש במודלים הגדולים והאיכותיים יותר שלא מופיעים כאן.
איך משתמשים
נכון לעכשיו אי אפשר להריץ את ההדגמה בדפדפן כי היא מדווחת על שגיאת ריצה כללית. כשהיא פועלת, מזינים משפט לתוך תיבת הטקסט ולוחצים על כפתור ההרצה כדי לבנות את האובייקט. המערכת יושבת על מאיץ גרפי בודד מסוג L4, חומרה חזקה שאמורה להחזיר נקודות בתוך שניות ספורות, אבל כל עוד השרת במצב שגיאה אין דרך להשתמש בה בפועל.
הרישיון
הרישיון לא מוגדר בעמוד ההדגמה. כשאין הצהרת רישיון ברורה, אסור להניח שאפשר לקחת את הפלט לשימוש מסחרי או לשלב את הקוד במוצר קיים בלי אישור מפורש מיוצריו.