search

מה זה

מזינים שאילתת טקסט או קטע קוד לתיבת החיפוש, בוחרים כמה תוצאות לקבל בעזרת סליידר שנע בין 1 ל־100, ומקבלים פלט בפורמט HTML שמציג את ההתאמות שנמצאו במאגר. ברירת המחדל מציגה 10 תוצאות לכל הרצה.

מתחת למכסה המנוע לא רץ מודל שיוצר קוד חדש, אלא מנוע Elasticsearch שסורק את סט הנתונים ששימש להכשרת המודל bigcode/starcoder. הקוד מנקה את התוכן באמצעות ספריית nh3 ומריץ שאילתות ישירות מול אינדקס הנתונים כדי לאתר מקטעים זהים או דומים.

מתאים ל

• בדיקת מקורות קוד

  בירור אם קטע קוד מסוים נכלל בנתוני האימון של StarCoder כדי להבין מאיפה המודל למד אותו.

• בדיקת חשיפת מידע

  חיפוש מחרוזות רגישות או מזהים פנימיים כדי לוודא שלא נשאבו לתוך מאגר הנתונים הציבורי.

• מחקר על דאטה-סטים

  בחינת ההתפלגות והסגנון של קטעי הקוד שמרכיבים את המאגר באמצעות שליפת תוצאות מדגמיות.

איפה זה נופל

הכלי מיועד לאיתור קוד קיים מתוך סט נתונים ולא לכתיבת פונקציות או להשלמת תחביר. אי אפשר להשתמש בו כעוזר פיתוח פעיל.

בנוסף, הסטטוס הנוכחי מוגדר כתקלת ריצה והשדות חסומים להקלדה בקוד. מי שבונה על שליפת תוצאות מיידית יגלה שהממשק פשוט לא מגיב כרגע.

איך משתמשים

נכנסים לעמוד, מקלידים את השאילתה, קובעים את מספר התוצאות המבוקש ולוחצים על Submit. האפליקציה רצה על חומרת cpu-basic בסיסית, כך שחיפושים מורכבים עשויים לקחת כמה שניות.

כרגע יש בעיה מעשית. המצב המדווח הוא שגיאת ריצה, ובקוד המקור תיבת הטקסט וכפתור השליחה מוגדרים במצב לא פעיל. המשמעות היא שכרגע אי אפשר לבצע חיפוש ישירות בדפדפן.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמאפשר שימוש חופשי בקוד, שינוי שלו והפצה מסחרית. לגבי השאילתות שאתם שולחים, הן מועברות לעיבוד מול שרת ה־Elasticsearch המקושר.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗