3d_animation_toolkit
רץ בדפדפןabrezaרישיון לא דווח2024-05-07
הכלי מרכז יצירת תמונות, כתיבת סיפורים והפיכת אובייקטים למודלים בתלת-ממד עבור יוצרי אנימציה. הממשק מחבר בין מחוללי תמונה קלאסיים לעיבוד רשתות תלת-ממדיות.
- —הורדות בחודש
- 46לייקים
מה זה
הממשק בנוי משלוש לשוניות פעילות שמציעות שלבי עבודה שונים. בלשונית הראשונה מייצרים עלילה או סיפור, בשנייה מייצרים תמונה ומסירים ממנה את הרקע, ובשלישית מפיקים את מודל התלת-ממד עצמו. לפי מבנה הקוד, לשונית נוספת לעריכת דמויות ונכסים בדו-ממד נוטרלה ולא מוצגת למשתמשים.
מאחורי הקלעים העסק מורכב ומסתמך על שרשרת ארוכה של מודלים מוכרים. ליצירת תמונות ועיבוד חזותי רצים כאן RealVisXL_V4.0, מודל Playground v2.5, גרסת הבסיס של Stable Diffusion 1.5 ומודל הראייה DINO של פייסבוק. את המעבר מאיור שטוח לאובייקט תלת-ממדי אמורים לבצע המודלים InstantMesh ו־Zero123plus v1.2, יחד עם שימוש בדאטהסט Instruct-Pix2Pix לעריכה.
מתאים ל
- הפקת מודלים מתמונה
הפיכת איור בודד לפורמט תלת-ממדי בעזרת InstantMesh ו־Zero123plus.
- יצירת דמויות נקודתית
הפקה מהירה של קונספט ארט בדו-ממד עם הסרת רקע אוטומטית.
- כתיבת שלד עלילתי
ניסוח רעיונות ראשוניים ובניית סיפור רקע להפקות אנימציה.
איפה זה נופל
הבעיה המיידית היא שהיא בכלל לא עובדת ברשת עקב שגיאת הריצה. מעבר לזה, ניסיון לדחוס יצירת סיפור, מחוללי תמונות כבדים והמרת תלת-ממד על גבי תשתית ענן שיתופית מייצר בדרך כלל צווארי בקבוק חריפים, קריסות זיכרון וזמני המתנה ארוכים מאוד בכל שלב של עיבוד רשתות.
שאלות
נפוצות
האם אפשר להשתמש באפליקציה כרגע באתר?
לא. המרחב נמצא כרגע בסטטוס שגיאת ריצה ואינו פעיל. תצטרכו להמתין שהמפתח יעדכן את הקוד, או להוריד את הקבצים ולהרים אותם באופן עצמאי.
האם השירות כרוך בתשלום?
הגישה לעמוד בהאגינג פייס פתוחה לגמרי ללא עלות. עם זאת, הרצה מקומית של כל הכלים האלה דורשת כרטיס מסך חזק מאוד, מה שעשוי לעלות כסף בחשבון ענן פרטי.
במה זה שונה משימוש במודלים בנפרד?
היתרון אמור להיות שרשור הפעולות תחת ממשק אחד, מכתיבת הטקסט ועד הפקת קובץ התלת-ממד. בפועל, בגלל התקלות עדיף כרגע לגשת ישירות לספייסים הייעודיים של InstantMesh או Playground שעובדים באופן יציב.
האם הקבצים שמעלים נשמרים ברשת?
אין מידע ברור על מדיניות שמירת הנתונים בקוד של הפרויקט. ככלל במרחבי רשת ציבוריים כאלה, עדיף לא להעלות חומרים רגישים או קבצים אישיים שאין לכם גיבוי עבורם.
איך משתמשים
נכון לעכשיו אי אפשר להריץ אותה ישירות בדפדפן. המערכת מוגדרת על חומרת zero-a10g אבל נמצאת במצב שגיאת ריצה, כך שהממשק פשוט לא עולה ומחזיר שגיאה. מי שרוצה להשתמש בקוד יצטרך לשכפל את המאגר ולהריץ אותו בסביבה פרטית משלו עם ה־GPU המתאים, לפחות עד שהיוצר יתקן את הקריסה.
הרישיון
היוצר לא הגדיר רישיון במאגר. בהיעדר רישיון מפורש, כל הזכויות על קוד המקור שמורות לו ולא ברור האם מותר להשתמש בתוצרים באופן מסחרי. יש לבדוק בנפרד גם את תנאי השימוש של כל אחד מתשעת המודלים הפנימיים.