audioseal
קוד פתוחfacebookmit2024-03-11
הכלי שותל חותמת מים בלתי מורגשת בקבצי קול ומזהה אותה בדיוק של שבריר שנייה. מי שמפתח כלי דיבור אודיו ורוצה להגן על הפלטים שלו מפני זיוף ימצא בו מענה ישיר.
- 610 MBמשקל הקבצים
- 30,021הורדות בחודש
- 43לייקים
מה זה
מדובר במערך של שני חלקים, מחולל וגלאי, שמטפלים בדיבור טבעי וסינתטי. המחולל מקבל אודיו ומוציא אות מים שאפשר להלביש ישירות על ההקלטה בלי לפגוע באיכות הסאונד בצורה מורגשת. אפשר גם להצמיד לחותמת הודעה סודית קצרה של 16 ביט, מה שנותן 65,536 אפשרויות לסימון גרסת המודל שיצרה את הקובץ או פרטים טכניים אחרים.
הגלאי סורק את האודיו במעבר יחיד ומהיר, ומחזיר הסתברות לקיום החותמת ברזולוציה של דגימה בודדת, כלומר אחד חלקי 16 אלף של שנייה. זה אומר שהוא מוצא חלקי קטעים שנחתכו או נערכו בתוך קובץ ארוך יותר בלי להאט את כל התהליך. החוזק שלו הוא עמידות לעריכות אודיו שונות ומהירות זיהוי גבוהה פי כמה ממודלים קודמים, בלי צורך לחכות שעות על קבצים כבדים.
מתאים ל
- סימון תוצרי דיבור סינתטי
מאפשר לדעת בדיוק איזה פלט נוצר במערכת שלכם בעזרת קידוד גרסה ב־16 ביט.
- איתור עריכות בקבצי קול
זיהוי מקטעים שנחתכו או שולבו בהקלטה ברמת דיוק של חלקיק שנייה.
- אימות מקור בזמן אמת
מתאים לסריקת כמויות גדולות של שיחות נכנסות בזכות ארכיטקטורת מעבר יחיד.
איפה זה נופל
המודל מיועד לדיבור ולא נבדק או הותאם לסוגי צליל אחרים, כמו מוזיקה או רעשי רקע מורכבים. ההודעה המוטמעת מוגבלת מאוד, 16 ביט בלבד, כך שאי אפשר לקודד בה טקסט חופשי, מזהי משתמש מלאים או מטא־דאטה רחב, אלא רק מספר מזהה קצר.
בנוסף, הכרטיס מציין שקוד האימון עדיין לא שוחרר אלא רק המשקלים המוכנים. תצטרכו להסתמך על מה שפייסבוק אימנו מראש ולבדוק בעצמכם איך החותמת שורדת דחיסות אגרסיביות שרלוונטיות לצנרת שלכם.
שאלות
נפוצות
האם הוספת החותמת תפגע באיכות הדיבור של המודל שלי?
המחולל בנוי כך שהוא מייצר שינוי מוגבל מאוד באות השמע. ברוב המקרים האוזן האנושית לא תבחין בהבדל, אבל תמיד כדאי להאזין לדגימות לפני שמעלים לשרת ייצור.
אפשר לשמור מחרוזת טקסט בתוך חותמת המים?
לא. המודל תומך בהודעה של 16 ביט בלבד. זה מספיק למספר מזהה של עד 65,536, שמתאים לקטלוג מודלים או משתמשים בטבלה נפרדת, אבל לא לטקסט חופשי.
איך מריצים
המודל שוקל 610 מגה בייט בסך הכול, כך שכל מעבד סביר או כרטיס מסך בסיסי לחלוטין מריצים אותו בלי להרגיש. ההתקנה נעשית ישירות דרך פקודת pip רגילה לספרייה הייעודית, כשדרישות הסף הן פייתון מגרסה 3.8 ופייטורץ' מגרסה 1.13 ומעלה, יחד עם חבילות כמו julius ו־omegaconf.
במשקל כזה אין שום סיבה בעולם לפנות לפתרונות חיצוניים או להסתמך על צד שלישי. הוא רץ מקומית, מתאים לעבודה בזמן אמת וקנה מידה רחב, ומשאיר את כל האודיו אצלכם על השרת בלי עלויות תעבורה מיותרות.
pip install -U huggingface_hub hf download facebook/audioseal
הקבצים
7 קבצים במאגר, 610 MB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.
הרישיון
רישיון MIT פתוח ומתירני לחלוטין. מותר להשתמש בו לפרויקטים מסחריים, לשנות את הקוד ולהפיץ אותו כחלק ממוצר שלכם, כל עוד שומרים על הודעת זכויות היוצרים המקורית.
- שימוש מסחרי
- שינוי הקוד
- הפצה מחדש