SoundwaveDemo

מה זה

הממשק מבוסס על gradio ומציג הדגמה ישירה למאמר המחקרי Soundwave מבית FreedomIntelligence. בקלט מזינים הנחיה טקסטואלית, ברירת המחדל שואלת מה האדם אומר, ומעלים קובץ קול בפורמט שמע. בתמורה מקבלים תיבת טקסט אחת עם פלט המודל.

בקוד יש דוגמה מובנית שמשתמשת בקובץ p225_002.wav מתוך תיקיית הדוגמאות, כך שאפשר לראות את כיוון העבודה גם בלי להקליט שום דבר מהצד שלכם. מה שמחבר את הדברים הוא מודל שמע שמנתח את ההקלטה ומחזיר פענוח או מענה מילולי לפי מה שביקשתם.

מתאים ל

• בדיקת שאלות על שמע

  שואלים בטקסט מה נאמר בהקלטה ומקבלים תמלול או תשובה ישירה.

• הערכת מאמר המחקר

  בוחנים את היכולות המעשיות של מחקר Soundwave ישירות מהדפדפן.

• ניתוח דוגמאות קול

  מריצים את דגימות ברירת המחדל כדי לבדוק דיוק זיהוי קולי.

איפה זה נופל

נכון לעכשיו העמוד מדווח על שגיאת זמן ריצה והוא לא פעיל בדפדפן. גם כשהוא רץ, שרת חלש ללא כרטיס מסך מתקשה לעמוד בעומס של מודלים כאלה. חוץ מזה, אי אפשר להבין מהממשק אם יש כאן תמיכה בעברית או שהאימון בוצע רק על אנגלית.

איך משתמשים

לוחצים על הדוגמה או מעלים שמע משלכם, מוודאים שההוראה כתובה, ומריצים. הממשק פועל ברשת ללא חובת התחברות לחשבון, אבל הוא יושב על חומרת מעבד בסיסית בלבד ללא מאיץ גרפי, כך שעיבוד שמע יכול לקחת זמן. שמירת הדוגמאות במטמון כבויה בקוד.

הרישיון

הפרויקט מפורסם תחת רישיון apache-2.0, שמתיר שימוש חופשי כולל שימוש מסחרי והתאמה של הקוד. המידע והקבצים שאתם מעלים עוברים דרך שרתי השירות שבו מתארח הממשק.

• שימוש מסחרי
• שינוי הקוד
• הפצה מחדש
• שימוש בפטנטים

הרישיון המלא ב־Hugging Face ↗