NSynth Super

הסקירה

כשמחברים מקלדת שליטה אל NSynth Super ונוגעים במסך המגע, שומעים צליל שלא נוצר מהקלטה רגילה וגם לא מסינתיסייזר מסורתי. המכשיר הזה לוקח 4 מקורות צליל שונים, טוען חישובים שנעשו מראש ברשת נוירונים עמוקה, ונותן לכם לנווט באצבע בתוך מרחב של יותר מ־100,000 צלילים חדשים. הצליל שמתקבל מחזיק תכונות אקוסטיות של המקורות יחד, למשל חליל וסיטאר שמתמזגים למרקם אחד. הפרויקט הזה נולד מתוך Magenta, קבוצת מחקר בתוך Google, יחד עם Google Creative Lab. הוא נועד לבדוק איך למידת מכונה יכולה להשתלב ביצירת מוזיקה חיה.

הוא דורש חיבור MIDI חיצוני כדי לעבוד.

איך הצליל מחושב בפועל

רוב הכלים בקטגוריית המוזיקה מערבבים שכבות או דוגמים גלי קול זה על גבי זה, אבל כאן קורה תהליך אחר לגמרי ברמת הדגימה הבודדת. החוקרים הקליטו באולפן 16 צלילי מקור שונים בטווח של 15 גבהים שונים, ואז הזינו אותם אל אלגוריתם NSynth שמבוסס על WaveNet. האלגוריתם מפעיל מבנה של autoencoder שמחלץ 16 מאפיינים זמניים מוגדרים מכל אות כניסה. במקום סתם לחבר בין עוצמות קול, המערכת מבצעת אינטרפולציה ליניארית בין המאפיינים האלה ומייצרת ייצוגים מתמטיים חדשים לגמרי, שנקראים embeddings. המכשיר מייצר צליל חדש מתוך התכונות האקוסטיות של המקורות ולא רק מחבר שתי הקלטות יחד. משם המודל מפענח את הייצוגים חזרה לגל קול מוזיקלי, בלי מניפולציה ידנית על פילטרים או תנודות מתח.

החוגות הפיזיות של המכשיר מקצות 4 צלילי מקור נבחרים מתוך המאגר שחושב מראש באולפן. כשגוררים את האצבע על פני מסך המגע, מתקדמים פיזית בין המאפיינים האקוסטיים של ארבעת המקורות שבחרתם, והצליל משתנה בהתאם למיקום המדויק. פקדי ADSR על הממשק מיועדים לעידון של מעטפת הצליל, כמו התקפה, דעיכה והחזקה. החיבור החיצוני מאפשר לנגן את התוצאה מכל מקלדת, סיקוונסר או תוכנת DAW ביתית.

אי אפשר לקנות אותו מוכן בחנות.

כמה זה עולה ומי בונה

אין פה תוכנית מנויים חודשית ואין כפתור רכישה, מפני שכל הפרויקט מוגדר כקוד פתוח. הקוד המלא, הסכמות האלקטרוניות ותבניות העיצוב הפיזיות זמינים להורדה חופשית מתוך GitHub. התוכנה נשענת על ספריות פתוחות, בעיקר TensorFlow וגם openFrameworks. מי שרוצה כלי כזה על השולחן יצטרך לקנות את הרכיבים בעצמו, להזמין ייצור מעגלים ולהרכיב את הקופסה, בין אם בוחרים מארז קרטון, עץ, זכוכית או מסגרת פלסטיק צבעונית. העלות הכספית היחידה היא קניית החומרה הפיזית והזמן שתשקיעו בהלחמה ובבנייה. למשתמש הישראלי אין תמיכה מקומית, אין שירות לקוחות בעברית ואין אחריות מסחרית אם משהו משתבש בהרכבה.

לא הייתי משתמש בזה להפקות שדורשות כלי נגינה סטנדרטיים או צפויים מראש.

זה שווה את זה רק אם אתם חוקרי סאונד, מפיקים שמחפשים גוונים אקוסטיים שלא קיימים בסינתיסייזר רגיל, או אנשים שאוהבים להרכיב חומרה בעצמם. מוזיקאי שצריך כלי עבודה מיידי לא ימצא פה מענה, כי האתר מציע רק את התיעוד והקבצים הדרושים לבניית אבטיפוס. מה שבאמת מפריע כאן הוא שהצלילים חושבו מראש על 16 מקורות בלבד, כך שאי אפשר להקליט סאונד חדש מהמיקרופון ולשמוע אותו מיד. כל הממשק מוגבל לחישובים שהוטענו לתוכו, והאתר עצמו כתוב באנגלית בלבד. אם אין לכם רקע באלקטרוניקה בסיסית או עניין לחקור את המחקר של Magenta, המכשיר הזה יישאר עבורכם רק שרטוט על מסך מחשב.

• מחיר תוכנהחינם בקוד פתוח
• מכשיר מורכבאין למכירה
• מאגר צליליםמעל 100000