חדש תמונה, וידאו, קריינות ותמלול בקריאה אחת, בלי להריץ מודל. מנסים בלי שרת

GPT
H

Hokkien_Translation

רץ בדפדפן

facebookcc-by-nc-4.02022-10-13

  • gradio

תרגום קולי ישיר בין אנגלית להוקיין, שפה מדוברת כמעט ללא כתב סטנדרטי. הכלי מיועד למי שחוקר תרגום דיבור לדיבור או מנסה לגשר על פערי שפה ספציפיים אלה.

  • —הורדות בחודש
  • 83לייקים

מה זה

אתם מעלים קובץ קול או מקליטים ישירות דרך הממשק, ובוחרים מודל מתוך תפריט נפתח. הפלט שחוזר הוא קובץ שמע מתורגם, כך שהתהליך כולו מתרחש ברמת הדיבור מבלי לעבור קודם דרך תמלול כתוב. הדבר משמעותי במיוחד עבור הוקיין, שפה שרווחת בעיקר בעל פה ואין לה מערכת כתיבה רשמית אחת.

מאחורי הקלעים הקוד טוען ארבעה מודלים שונים של מטא דרך ממשקי Hugging Face. שניים מהם מבוססים על ארכיטקטורת xm_transformer_unity ושניים על xm_transformer_s2ut. המודלים מחולקים לפי כיווני התרגום, כך שאפשר לתרגם מאנגלית להוקיין או להפך, בהתאם לדגם שתבחרו ברשימה לפני השליחה.

מתאים ל

  • מחקר תרגום דיבור

    בדיקת איכות של תרגום דיבור ישיר לדיבור ללא תיווך טקסטואלי.

  • תרגום מאנגלית להוקיין

    המרת הקלטות באנגלית לשמע בשפת הוקיין בעזרת מודלי unity ו־s2ut.

  • תרגום מהוקיין לאנגלית

    הבנת הקלטות קוליות בהוקיין על ידי הפקת תרגום שמע ישיר באנגלית.

איפה זה נופל

הבעיה המיידית היא שהכלי מושבת על שגיאת זמן ריצה, כך שאי אפשר להריץ בו שום דבר כרגע. מעבר לכך, אין כאן שום תמיכה בעברית או בשפות אחרות מעבר לאנגלית והוקיין. אי אפשר לקבל פלט טקסטואלי אלא רק שמע, ומאחר שמדובר במעבד רגיל, גם אם האפליקציה הייתה תקינה זמני ההמתנה לקבלת קובץ קול היו ארוכים.

שאלות
נפוצות

האם הכלי עובד בחינם?

השימוש בממשק עצמו מוצע ללא תשלום. עם זאת, נכון לעכשיו הוא מציג שגיאת ריצה ולא מבצע תרגום בפועל. אם יתקנו אותו, הגישה דרך הדפדפן אמורה להישאר חופשית.

האם אפשר להריץ את המודלים מקומית?

כן, המודלים עצמם פתוחים להורדה מבית פייסבוק דרך Hugging Face תחת רישיון לא מסחרי. הקוד של הממשק רק מושך אותם דרך ממשק חיצוני. כדי להריץ אותם על המחשב שלכם תצטרכו חומרה מתאימה ותמיכה במודלי דיבור.

כמה זמן לוקח לתרגם הקלטה?

בגלל שמוגדרת חומרה מסוג מעבד רגיל ולא מאיץ גרפי, תרגום שמע צפוי לקחת זמן מורגש ביחס לאורך ההקלטה. כרגע לא ניתן לבדוק זאת בפועל בגלל שגיאת הריצה שמשביתה את המערכת. ברגע שהיא תחזור לפעול, מומלץ להתחיל מקבצים קצרים בלבד.

איך משתמשים

טוענים קובץ אודיו לממשק, בוחרים את המודל הרצוי מהרשימה ולוחצים על Submit. התשתית המוגדרת היא מעבד בסיסי, cpu-basic, כך שעיבוד שמע כזה לא צפוי להיות מהיר במיוחד. מעבר לזה, האפליקציה נמצאת כרגע במצב של שגיאת ריצה, מה שאומר שהיא כלל לא תעבוד בדפדפן עד שיתקנו את הקוד או את מפתחות הגישה.

הרישיון

הרישיון הוא cc-by-nc-4.0. המשמעות היא שהשימוש מוגבל למטרות לא מסחריות בלבד, כך שאי אפשר לשלב את המודלים או את התוצרים שלהם במוצרים עסקיים.

  • שינוי הקוד
  • חובת ייחוס
  • שימוש מסחרי: לא

הרישיון המלא ב־Hugging Face ↗