open-notebooklm
רץ בדפדפןgabrielchuaרישיון לא דווח2024-09-29
הכלי מייצר שיחת פודקאסט קולית מקובץ מסמך או כתובת רשת. הוא פונה למי שמחפש חלופה פתוחה ליצירת אודיו מתוכן כתוב בכמה שפות.
- —הורדות בחודש
- 1,090לייקים
מה זה
אתם מעלים קובץ PDF או מזינים קישור דרך Jina Reader, ויכולים להוסיף שאלה מנחה כדי למקד את הדיון. הממשק מאפשר לבחור הגדרות שונות לשיחה ומפיק שני דברים: תמליל טקסטואלי מלא של הדיאלוג וקובץ שמע סופי בפורמט MP3 להאזנה.
מאחורי הקלעים רץ שילוב של כמה מודלים נפרדים. הטקסט מעובד בעזרת מודל השפה Llama 3.3 70B שפועל דרך Fireworks AI יחד עם ספריית Instructor כדי לבנות דיאלוג במבנה מוגדר. את הפיכת הטקסט לדיבור מבצעים מודלי הקול MeloTTS או Bark, וחיבור קטעי השמע נעשה באמצעות ספריית pydub.
מתאים ל
- המרת מאמרים לפודקאסט
מעלים קובץ PDF של מחקר או מסמך עבודה ומקבלים שיחה קולית שמסבירה את עיקרי הדברים.
- האזנה לעמודי רשת
מזינים כתובת אינטרנט כדי לקרוא את התוכן דרך Jina Reader ולהפוך אותו לקובץ שמע.
- הפקת תמלילי שיחה
מייצרים תסריט דיאלוג מובנה ומוכן מראש מתוך טקסט קיים לפני שמקליטים אותו.
איפה זה נופל
העמוד ברשת לא מתפקד כרגע ואינו זמין להתנסות מיידית. מעבר לכך, המודל Bark דורש משאבי מחשוב כבדים ועלול לעבוד לאט מאוד ללא מאיץ גרפי. הקוד בודק תקינות של קובצי PDF ומוגבל באורך הקלט, כך שמסמכים ארוכים מדי נחסמים עם הודעת שגיאה.
שאלות
נפוצות
האם הכלי זמין בחינם בדפדפן?
לא כרגע. העמוד נמצא במצב של שגיאת בנייה ולא מאפשר הרצה ישירה ברשת. כדי להשתמש בו צריך להריץ את הקוד לבד ולהחזיק מפתח בתשלום לשירות Fireworks AI.
האם אפשר להריץ את הכלי מקומית?
כן, הקוד פתוח לחלוטין וניתן לשכפול מהמאגר בגיטהאב. תצטרכו להתקין סביבת פייתון, להוריד את התלויות ולספק מפתח מתאים להפעלת מודל השפה. קחו בחשבון שמודלי השמע ידרשו חומרה חזקה כדי לרוץ במהירות סבירה.
במה הכלי שונה משימוש ישיר במודל השפה?
הוא מחבר שרשרת שלמה של פעולות במקום שתעשו אותן ידנית. הממשק קורא את המסמך, מנסח דיאלוג בעזרת המודל ומעביר את התוצאה למנוע שמע שמפיק קובץ MP3 סופי. שימוש ישיר ב־Llama ייתן לכם רק טקסט בלי קול ובלי עיבוד קבצים.
איך משתמשים
העמוד כרגע במצב שגיאת בנייה בגלל תקלה בהרצה על גבי מעבד בסיסי, כך שאי אפשר להשתמש בו ישירות בדפדפן. כדי להפעיל את הכלי צריך לשכפל את הקוד מגיטהאב, להתקין את התלויות בסביבת פייתון מקומית ולהגדיר מפתח גישה לחשבון Fireworks AI. היצירה דורשת עיבוד טקסט ומודלי שמע כבדים, ולכן על מעבד מקומי חלש מדובר בתהליך ארוך שידרוש זמן המתנה.
הרישיון
בקובץ המאגר מצוין רישיון Apache 2.0 שמאפשר שימוש חופשי ושינוי קוד, אך בעמוד הנתונים הראשי לא דווח רישיון רשמי. השימוש במודל השפה תלוי במדיניות של Fireworks AI ושל מטא, וכל מסמך שאתם שולחים מועבר לעיבוד דרך שרתי ה־API שלהם.