חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
D

diffusion_brain

רץ בדפדפן

Warvitoרישיון לא דווח2022-07-28

  • gradio

הכלי מייצר הדמיות מוח תלת ממדיות סינתטיות לפי מאפיינים פיזיולוגיים כמו גיל, מין ונפח. הוא מיועד לחוקרים ומתעניינים בדימות רפואי שמחפשים סריקות מוח מבוססות מודל דיפוזיה.

  • —הורדות בחודש
  • 55לייקים

מה זה

אתם מזינים משתנים מספריים או קטגוריאליים על הנבדק. הממשק מציע שתי לשוניות להזנה: אחת רגילה עם כפתורי בחירה למין וסליידרים לגיל, נפח מוח ונפח חדרים, ואחת שמקבלת ערכים מספריים חופשיים ללא הגבלה. יש גם לשונית להזנת תיאור טקסטואלי, אך היא מסומנת ככזו שתגיע בהמשך ואינה פעילה בקוד.

התוצאה היא סריקת מוח מדומה המוצגת בשלושה חיתוכים שונים, אקסיאלי, סגיטלי וקורונלי, באמצעות נגני וידאו שמאפשרים לראות את כל שכבות הסריקה. בנוסף נוצר קובץ להורדה, שמתבסס על ספריית nibabel המשמשת לעבודה עם פורמטים של דימות רפואי.

מאחורי הקלעים רץ דוגם דיפוזיה מסוג DDIM בתוך PyTorch, יחד עם MLflow לטעינת המודל. הממשק כולל דוגמאות מובנות בלשונית הנתונים החופשיים ובלשונית הטקסט, וכן כפתור שמגריל ערכים באופן אוטומטי.

מתאים ל

  • הדמיית סריקות מוח

    יצירת סרטוני חיתוך תלת ממדיים של מוח לפי גיל ומין לבדיקת התנהגות מודל דיפוזיה.

  • חקר שינויי נפח

    בחינת השפעת נפח החדרים ונפח המוח על המבנה האנטומי המיוצר בקובץ הפלט.

  • ייצוא נתוני דימות

    הורדת קובץ הסריקה שנוצר באמצעות nibabel לשימוש בכלים חיצוניים לניתוח רפואי.

איפה זה נופל

הבעיה המרכזית כרגע היא שהאפליקציה במצב BUILD_ERROR, כלומר היא לא נבנית ונכשלת עוד לפני שהיא עולה לדפדפן. אי אפשר לייצר איתה סריקות בפועל בלי לתקן את קוד הבנייה. בנוסף, לשונית יצירת מוח לפי טקסט אינה פעילה וחסומה לעריכה, והסריקות שנוצרות הן סינתטיות לחלוטין ולא מייצגות מידע קליני אמיתי של מטופלים.

שאלות
נפוצות

האם הכלי עובד כרגע בדפדפן?

לא. האפליקציה מדווחת על שגיאת בנייה ולכן אינה פעילה כרגע ברשת. כדי להשתמש בה יש להוריד את הקבצים ולתקן את סביבת ההרצה.

האם האפליקציה עולה כסף?

לא, הגישה לקוד ולעמוד בחינם. עם זאת, בגלל שהיא שבורה כרגע, אין שירות פעיל שניתן לצרוך.

האם אני מעלה קבצים פרטיים לשם?

לא, אין בממשק אפשרות להעלות קבצים משלכם. אתם מזינים רק ערכים מספריים והכלי מפיק סריקה מתוכם.

האם אפשר להריץ את המערכת מקומית?

כן, קוד ה־Gradio וקבצי המודל זמינים להורדה. מומלץ להריץ אותם על מחשב עם מעבד גרפי כדי לקצר את זמני הדגימה.

איך משתמשים

לוחצים על כפתור Generate הרגיל, או בוחרים בכפתור ההגרלה כדי למלא ערכים אקראיים. אין צורך בהתחברות או בהרשמה כדי לגשת לדף. עם זאת, האפליקציה מוגדרת על שרת cpu-basic חלש וללא מעבד גרפי ייעודי, כך שדגימה ממודל דיפוזיה כזה צפויה לקחת זמן ממושך מאוד אם היא רצה.

הרישיון

היוצר לא הגדיר רישיון לפרויקט הזה. במצב כזה חלים דיני זכויות היוצרים הרגילים, מה שאומר שאין לכם היתר מפורש להשתמש בקוד, במודל או בקבצים שנוצרים בו לשימוש מסחרי או מחקרי ללא אישור ישיר ממנו.

הרישיון המלא ב־Hugging Face ↗