GPT
D

hysts/daily-papers

רץ בדפדפן

hystsmit2023-08-17

  • gradio

חיפוש סמנטי במאגר המאמרים היומיים של האגינג פייס לחוקרים שרוצים למצוא עבודות ישנות. מקלידים שאילתה חופשית ומקבלים טבלה מסודרת של פרסומים.

  • הורדות בחודש
  • 294לייקים

מה זה

אתם מקלידים שאילתת טקסט חופשית באנגלית בתיבת החיפוש, בוחרים טווח תאריכים ומקבלים טבלת תוצאות שמציגה מאמרים מהעבר. הממשק מאפשר לקבוע כמה מועמדים לשלוף וכמה תוצאות סופיות להציג על המסך, ומציג גם מונה של סך כל המאמרים הזמינים במאגר באותו רגע.

מאחורי הקלעים פועל מנגנון חיפוש דו שלבי שמבוסס על מודלים של BAAI. בשלב הראשון המודל BAAI/bge-base-en-v1.5 שולף מאגר ראשוני של מועמדים מתוך נתוני וקטורים שמורים מראש, ובשלב השני המודל BAAI/bge-reranker-base מדרג אותם מחדש לפי התאמה לשאילתה. המידע מגיע ממאגרי נתונים ייעודיים שמכילים את רשימת המאמרים, הסטטיסטיקות והשיכונים שלהם.

מתאים ל

  • איתור מאמרים לפי נושא

    חיפוש סמנטי באנגלית למציאת מאמרים קודמים שלא זוכרים את שמם המדויק.

  • סינון לפי תקופות

    הגדרת טווח תאריכים מוגדר לבדיקת מגמות מחקר או פרסומים מחודש מסוים.

  • שליפת רשימות לקריאה

    קבלת טבלת נתונים מסודרת עם עשרות תוצאות מדורגות לקריאה מרוכזת.

איפה זה נופל

החיפוש מוגבל אך ורק למאמרים שנאספו במאגר hysts-bot-data ולא סורק את כל arXiv או את הרשת בזמן אמת. המודלים של bge אומנו על אנגלית, כך שחיפוש בעברית לא ייתן תוצאות רלוונטיות. אם תגדירו מספר תוצאות שגבוה מגודל מאגר המועמדים, הממשק יזרוק שגיאה מפורשת ולא יציג דבר.

שאלות
נפוצות

האם השימוש כרוך בתשלום?

לא. האפליקציה פתוחה וחינמית לחלוטין לשימוש ישיר דרך הדפדפן ללא צורך בהזנת אמצעי תשלום.

מה קורה עם המידע שאני מזין?

אתם מקלידים רק מילות חיפוש ולא מעלים קבצים. השאילתות מעובדות מול המאגר לצורך החזרת התוצאות בלבד.

האם אפשר להריץ את זה מקומית?

כן, הקוד משתמש ב Gradio ובספריות סטנדרטיות, והוא זמין ברישיון MIT. תצטרכו להוריד את המודלים של BAAI ואת הדאטהסטים שמצוינים בקוד כדי להריץ הכל עצמאית.

כמה זמן לוקח לקבל תוצאות?

אם החומרה פעילה התשובה חוזרת תוך שניות בודדות. אם השרת נמצא במצב שינה, תידרש חצי דקה עד דקה להרצת הסביבה.

איך משתמשים

פותחים את העמוד בדפדפן בלי צורך בהתחברות או בהרשמה. מקלידים מונח חיפוש בשדה הראשי, ואם רוצים אפשר לפתוח את אפשרויות החיפוש ולכוונן את גודל מאגר המועמדים בין 1 ל 600 ואת מספר התוצאות בין 1 ל 400, לצד בחירת תאריכי התחלה וסיום. לחיצה על כפתור השליחה מריצה את החיפוש. המערכת יושבת על חומרת zero-a10g, כך שאם השרת קר תידרש המתנה קצרה להפעלה, אך לאחר מכן הדירוג וההצגה בטבלה מתבצעים מהר.

הרישיון

הקוד מופץ תחת רישיון MIT שמאפשר שימוש חופשי, שינוי והפצה, כולל לצרכים מסחריים. אתם לא מעלים לכאן קבצים אלא רק שולחים שאילתות טקסט, כך שאין סיכון של חשיפת מסמכים פרטיים.

  • שימוש מסחרי
  • שינוי הקוד
  • הפצה מחדש

הרישיון המלא ב־Hugging Face ↗