Applio

קוד פתוח

IAHispanomit2023-10-03

transformers
onnx
AI
RVC
VITS

פתרון מבוסס קוד פתוח להמרת קול מקובץ לקובץ, המיועד למי שמחפש שליטה מלאה בעיבוד אודיו עצמאי. הוא כולל תמיכה בתוספים ואפשרות להתאמה אישית.

89.6 GBמשקל הקבצים
109הורדות בחודש
205לייקים

מה זה

מדובר במערך קבצים להמרת קול בגישת אודיו לאודיו, שפותח כדי לתת מענה לעיבוד קולי באיכות גבוהה עם דגש על פשטות וביצועים. המאגר מכיל עשרות קבצים שמיועדים לעבודה בסביבת פיתוח עצמאית, כולל תמיכה בהרחבות דרך פלאגינים והתאמות קונפיגורציה שונות לפי צורכי הפרויקט.

המודלים הרשמיים שחולקו במאגר אומנו על גבי מאגרי מידע ציבוריים דוגמת VCTK. המבנה מבוסס על ספריות מוכרות כמו transformers ומשלב ממשק מבוסס Gradio יחד עם כלי ניטור מובנים, מה שמאפשר לבצע אימונים ומעקב ישירות מהדפדפן בלי לבנות את כל מעטפת הניהול מאפס.

מתאים ל

המרת קול בהפקות אודיו
מאפשר לשנות גוון קול של הקלטות קיימות באמצעות מודלים שאומנו על מאגרי דיבור ציבוריים.
אימון ובדיקת מודלים קוליים
כולל סקריפטים מובנים להרצת ניטור בטנסורבורד למעקב אחרי תהליכי אימון מקומיים.
הרצה בענן דרך קולאב
מתאים למי שרוצה לעבד קול בלי להתקין את כל עשרות הגיגה בייטים ישירות על המחשב.

איפה זה נופל

המשקל הכולל של המאגר הוא מכשול רציני לכל מי שמתכנן התקנה מהירה או שילוב במוצר קצה רזה. מעבר לנפח העצום, המפתחים מדגישים שהאחריות על שימוש בחומרי אודיו מוגנים בזכויות יוצרים חלה במלואה על המשתמש, ושאין להשתמש בכלי לפגיעה או להפצת תוכן ללא אישור. המודלים אומנו על נתונים ציבוריים, ולכן נדרשת בדיקה קפדנית של איכות ההמרה בשפות שונות לפני שילוב בתהליך עבודה קבוע.

שאלות
נפוצות

האם חייבים להוריד את כל הקבצים כדי להתחיל לעבוד?

לא חובה להוריד הכל למחשב האישי. אפשר להשתמש במחברות הגוגל קולאב שהפרויקט מספק כדי לבדוק את היכולות בענן לפני שמתחייבים להורדה של עשרות גיגה בייטים.

האם מותר להשתמש בכלי הזה בתוך אפליקציה מסחרית?

הקוד מופץ תחת רישיון MIT שמתיר שימוש מסחרי. לצד זה, המפתחים מבקשים לפנות אליהם בדוא"ל לפני שימוש מסחרי ולוודא שהאודיו שאתם מעבדים אינו מפר זכויות יוצרים.

איך מריצים

ההפעלה המקומית מתבצעת באמצעות סקריפטים ייעודיים למערכות ווינדוס, לינוקס או מאק, שמתקינים את התלויות ומרימים ממשק דפדפן מקומי. עם זאת, המשקל הכולל של הקבצים מגיע לכמעט תשעים גיגה בייט, כך שחובה להכין מראש נפח אחסון גדול מאוד ומשאבי מחשוב חזקים לצורך הפריסה.

מי שאין לו כוח מחשוב מקומי מתאים יכול להריץ את העסק על גבי מחברות גוגל קולאב שהמפתחים הכינו, עם או בלי ממשק גרפי. אם אתם צריכים רק המרת אודיו נקודתית בלי לנהל את כל הקבצים וההתקנות הכבדות, פתרון ענן חיצוני או שירות מנוהל יחסוך לכם את ההורדה המאסיבית הזו.

from transformers import pipeline

pipe = pipeline("audio-to-audio", model="IAHispano/Applio")
print(pipe("שלום"))

הקבצים

97 קבצים במאגר, 89.6 GB סך הכול. הקישורים מובילים ישירות ל־Hugging Face.

הרישיון

הרישיון הוא MIT, מה שמאפשר שימוש חופשי כולל שימוש מסחרי, שינוי הקוד והפצה. עם זאת, היוצרים מבקשים ליצור איתם קשר במייל לפני יישום מסחרי כדי לוודא שימוש אתי, ומזכירים שכל תוצר שמופק מחייב עמידה בחוקי זכויות יוצרים.

שימוש מסחרי
שינוי הקוד
הפצה מחדש

הרישיון המלא בעמוד המודל ↗