עם קצת עזרה: איך נייד של וואווי תרגם את זוהר הקוטב למוזיקה
בפני משלחת בינ"ל של כ-300 עיתונאים מרחבי אירופה שהתכנסה בווינה, אוסטריה בשבוע שעבר הציגה חברת וואווי הסינית תצוגת תכלית ששילבה בין עבודת יח"צ ממותגת למפגן טכנולוגי שחשף את יכולות הבינה המלאכותית (AI - Artificial intelligence) של ה-Mate 20 Pro, מכשיר הטלפון החדש של המותג שהושק לאחרונה.על במת אולם הקונצרטים הוינאיBrahms Hall Musikverein, וואווי הציגה את פרויקט Sound of light היומרני והמבטיח: חיבור בין תופעת הזוהר הצפוני המדהימההמאופיינת באורות זרחניים בצבעים שונים בשמי הלילה למכשיר ה-Mate 20 של וואווי, שבמסגרתו המכשיר תרגם את האורות, תנועתם וצורותיהם לסימפוניה קלסית.כך לפחות הוצג הפרויקט הייחודי לפני הירידה לפרטי פרטים. בפועל, מערכת ה-AI של וואווי תרגמה את אורות הזוהר הצפוני ל-10 קלסתרים שונים, מובדלים ומאופיינים לאחר שאומנה לכך על ידי צוות אנושי של מוזיקאים ומתכנתים. קטעי מוזיקה שהולחנו מראש לכל אחד מאותם קלסתרים של "צורות אור" הוצמדו למה שזיהתה מערכת ה-AI על בסיס קובץ וידאו שבתוכו שעות צילום רבות של הזוהר הצפוני.
התוצאות שמערכת ה-AI השיבה לצוותי הפיתוח עובדו אף הן כדי לייצר את המוזיקליות הנעימה שנכון להיום המכונה מוגבלת ביכולתה לספק. במילים פשוטות יותר - מערכת ה-AI אספה מידע, הצמידה אותו לקטעי מוזיקה שנכתבו מראש לכל צורת אור, העבירה אותו הלאה וקיבלה בחזרה פידבק שלימד אותה מחדש היכן "טעתה", מתי היא נדרשת להשיב במענה מוזיקלי אחר וכיצד לשלב בין הקטעים באופן שישביע את רצונם של המתכנתים."כל התהליך הוא של חיבור בין אדם ומכונה וכמו בכל חיבור שכזה, התוצאה אף פעם לא תואמת ב-100% כמו למשל בטכנולוגיית זיהוי פנים". כך אומר מי שעמד בראש צוות הפיתוח הטכני של וואווי מטעם חברת UNIT9. "מה שטוב בללמד מכונה ו-AI, וחלק ממה שעשינו, זה שאפשר לאתגר אותה ולבקש ממנה מענה חוזר רב פעמי עד שאתה מגיע לתוצאה שמקובלת עליך ונעימה לך".
לדברי גאודן, "בנינו את המכשיר עם התמקדות על המוח האינטליגנטי שבלבו ואנחנו כבר משתמשים ב-AI בפן הויזואלי ובפן הלשונאי לתרגום שפות. אם מסתכלים מנקודת מבט אמנותית מוזיקה היא שפה - כל מה שמספר סיפור הוא שפה ומוזיקה מספרת סיפור. מה שעשינו כאן היה לחקור ולבדוק את גבולות ה-AI, כיצד הוא יוצר מוזיקה מהאור. זה מה שהצית את מוחנו".ואחרי הכל, השאלה שמסקרנת כל אחד מאיתנו היא האם אנחנו יכולים להיעזר באותה מערכת AI עבור הצרכים היומיומיים הפשוטים שלנו? והתשובה נכון לעכשיו היא לא החלטי וברור. בעתיד הקרוב הנראה לעין לא נוכל לקחת את ה-Mate 20 Pro של וואווי ולבקש ממנו לתרגם עבורנו צילום של משחק כדורגל, מופע לייזרים או סופת ברקים לסימפוניה. אלא אם כן עומד מאחריכם צוות פיתוח מלא בעלות של מאות אלפי שקלים."בתיאוריה אתה יכול להשתמש באפליקציה שתוזן על המכשיר כדי שתוכל לקרוא וידאו ולתרגם את זה לסאונד, אבל כמ שהסברנו, מה שנעשה פה מבוסס על שילוב בין אדם למכונה - משום שאחד הדברים ש-AI עדיין לא יודעת לעשות זה להבין רגשות. היא עדיין לא יכולה להבין את המוזיקליות שמישהו כמו מארק (מלחין היצירה) יכול להבין. היא יכולה לייצר משהו מוזיקלי-טכני אבל לא את הדבר ששמענו הערב".* הכותב היה אורח של חברת וואווי באירוע Sound of light בוינה- 2.הוידאו הועלה ליוטיוב ע״י יוזר ישראלי? מה? (ל"ת)ג׳יזס 04/12/2018 08:00הגב לתגובה זו
- 1.צביקה 03/12/2018 16:59הגב לתגובה זובהחלט התפתחות טכנולוגית מעניינת, תודה רבה על השיתוף!