אפל איירפודס פרו
צילום: אתר החברה

מצלמה בכל אוזן: כך אפל מתכננת לתת לסירי עיניים

קוד שהתגלה במערכת ההפעלה של אפל חושף פרטים חדשים על האיירפודס העתידיות: שתי האוזניות עשויות לצלם תמונות מסונכרנות, לזהות אנשים ולעבוד גם במצב רקע; המטרה אינה לצלם תמונות לאלבום, אלא לאפשר לסירי להבין על מה המשתמש מסתכל - והיכולת הזאת מעלה גם שאלות חדשות על פרטיות

ענת גלעד |

מה קורה כשהעוזרת הקולית שנמצאת באוזן מקבלת גם עיניים? קוד שהתגלה במערכת ההפעלה של אפל מספק הצצה לאופן שבו החברה בוחנת את הדור הבא של האיירפודס: מצלמה בכל אוזנייה, שתי מצלמות שפועלות בתיאום ויכולת לספק לסירי מידע חזותי על העולם שסביב המשתמש. הרעיון אינו להפוך את האיירפודס למצלמה נוספת, אלא לאפשר למשתמש פשוט להסתכל על משהו ולשאול עליו - בלי להוציא את האייפון מהכיס.

בשבוע שעבר נחשף סרטון בתוך גרסת macOS Tahoe 26.7 שבו נראות איירפודס משתמשות בבינה חזותית כדי להבין מה המשתמש רואה. עכשיו מתברר שהסרטון היה רק חלק מהסיפור. בדיקה של קוד נסתר במערכת ההפעלה חושפת כיצד אפל לפחות ניסתה לבנות את המוצר בפועל.

הקוד, שהתגלה במסגרת בשם AccessorySensorManager, מצביע על שתי מצלמות צבע, אחת בכל אוזנייה, שמחזירות תמונות מסונכרנות עם אותו מספר פריים. במצב אקטיבי, למשל כאשר המשתמש שואל את סירי מה נמצא מולו, החיישנים יכולים לצלם תמונה ברזולוציה של 640 על 640 פיקסלים ולהחזיר תמונה מעובדת של עד 1,024 על 1,024 פיקסלים. במצב פסיבי הרזולוציה נמוכה יותר, סביב 320 על 320 פיקסלים.

אלה מספרים נמוכים מאוד בהשוואה למצלמת סמארטפון, אבל זו בדיוק הנקודה. אפל אינה מנסה להפוך את האיירפודס למצלמת 48 מגה-פיקסל לצילום החופשה. היא זקוקה למספיק מידע חזותי כדי שה-AI יוכל להבין אם המשתמש מסתכל על ספר, שלט, חנות, אדם או חפץ.

לפי הקוד, המערכת בנויה בעיקר לצילום תמונות בודדות ולא להקלטת וידאו רגילה. היא יכולה לבקש זוג תמונות מסונכרנות בעת הצורך, או לקבל תמונות בפרקי זמן קבועים לצורך מודעות לסביבה. קיימים גם מנגנונים לתיקון עיוותי עדשה, כיול בין שתי המצלמות והתאמה לחיישני התנועה, כדי להתמודד עם בעיה בסיסית: אוזניות זזות כל הזמן יחד עם הראש.

המערכת אף יכולה לפסול תמונה אם הראש זז יותר מדי או אם השיער מסתיר את החיישן. חלק מהעיבוד מתוכנן להתבצע ישירות באוזניות, והקוד כולל בין היתר אפשרות לזהות אם אדם נמצא בשדה הראייה.

למה בכלל צריך שתי מצלמות באוזניים?

כאן נמצא החלק האסטרטגי של המוצר. הטלפון יודע הרבה על המשתמש, אבל הוא לא יודע באופן רציף על מה המשתמש מסתכל. משקפיים חכמים פותרים את הבעיה בצורה טבעית, ולכן מטא בנתה סביב משקפי ריי-באן שלה עוזר AI שמקבל תמונה מהעולם.

אפל בוחנת דרך אחרת. מאות מיליוני אנשים כבר התרגלו ללכת שעות עם איירפודס, ולכן האוזניות יכולות להפוך לנקודת החיבור בין סירי לבין העולם הפיזי בלי לדרוש מהצרכן להתחיל להרכיב משקפיים חכמים.

השימושים האפשריים רחבים. משתמש שהולך ברחוב יכול לשאול "באיזה כיוון נמצאת התחנה?", והמערכת תוכל לקרוא את השלטים ולהבין מה נמצא מולו. בסופר יהיה אפשר להסתכל על מוצר ולשאול עליו, מול תפריט בשפה זרה לקבל תרגום באוזן, ואדם עם לקות ראייה יוכל לקבל תיאור של מה שנמצא מולו.

אפשר לדמיין גם שימוש בזיכרון חזותי: המשתמש שואל "איפה הנחתי את המפתחות?" והמערכת בודקת אם ראתה אותם קודם. היכולת הזאת עדיין אינה מוצר שאפל הכריזה עליו, אבל היא ממחישה לאן חיבור בין מצלמה, AI ואוזניות יכול להתפתח.

שתי מצלמות יכולות גם לספק למערכת יותר מידע על הסביבה מאשר מצלמה יחידה. שני חיישנים שמביטים בעולם מזוויות מעט שונות, יחד עם נתוני התנועה של האוזניות, יכולים לעזור למערכת להבין טוב יותר את הסצנה. מנגנוני הכיול שנמצאו בקוד מצביעים על כך שאפל התייחסה לשתי המצלמות כמערכת אחת ולא כשני חיישנים נפרדים.

ומה קורה כשהמצלמה עובדת ברקע?

כאן מגיעה גם שאלת הפרטיות. בסרטון הראשוני היה קל לחשוב על תרחיש פשוט: המשתמש שואל שאלה, האוזנייה מצלמת לרגע וסירי עונה. הקוד החדש מצביע גם על מצב פסיבי, שבו המערכת יכולה להיות מודעת לאירועים כמו דיבור בסביבה, שינוי בעוצמת הקול, סיבוב הראש, שינוי בתנוחה או תנועה מחוץ לאזור מסוים.

לא ברור שכל אירוע כזה מפעיל צילום, ולכן מוקדם להסיק שהאוזניות אמורות לצלם ברציפות. אבל עצם העובדה שהמערכת תוכננה גם למודעות ברקע משנה את הדיון. מצלמה שמופעלת רק לאחר פקודה מפורשת היא דבר אחד; חיישן חזותי שאמור לספק ל-AI הקשר על הסביבה לאורך היום הוא כבר מוצר מסוג אחר.

אפל כנראה מודעת לרגישות הזאת. בקוד נמצא מנגנון לשליטה בנורית חיווי חומרתית שאמורה להראות כאשר מתבצע צילום. ויש הבדל חשוב לעומת משקפיים חכמים: לפחות בגרסה שנחשפה, המצלמות אינן מיועדות בעיקר לצילום סרטונים ותמונות עבור המשתמש, אלא כחיישנים שמזינים מידע למערכת ה-AI.

קיראו עוד ב"BizTech"

מבחינת האדם שעומד מול המשתמש, עם זאת, ההבדל פחות חד. חיישן חזותי עדיין רואה אותו. לכן השאלות החשובות יהיו אילו תמונות נשמרות, לכמה זמן, איזה עיבוד מתבצע על המכשיר עצמו ואיזה מידע, אם בכלל, מגיע לענן.

עדיין לא האיירפודס שיגיעו לחנויות

יש גם הסתייגות חשובה לגבי לוחות הזמנים. האיירפודס שנראו בסרטון נשאו לפי הדיווחים את שם הקוד B790, והדגם הזה כנראה כבר אינו המוצר שאפל מתכננת לשווק. לפי הדיווחים העדכניים, החברה עברה לדור אחר בשם B798, וההשקה עשויה להיות ב-2027 ולא בהכרח באירוע האייפון הקרוב.

כלומר, הסרטון והקוד מראים עד כמה אפל עבדה על הרעיון, אבל הם אינם אישור לכך שהחומרה הספציפית שנחשפה תגיע לחנויות או שכל היכולות שנמצאו בקוד ייכללו במוצר מסחרי.

מבחינת אפל, הפוטנציאל הכלכלי ברור. ברבעון שהסתיים ביוני הכניסה חטיבת המוצרים הלבישים, הבית והאביזרים כ-7.9 מיליארד דולר, עלייה של 6% לעומת השנה הקודמת. לפי Counterpoint, אפל החזיקה ברבעון הראשון של 2026 בכ-20% משוק האוזניות האלחוטיות במונחי יחידות ובכ-35% מההכנסות.

היתרון שלה הוא שהיא אינה צריכה בהכרח לשכנע את הצרכנים לאמץ קטגוריית מוצר חדשה. האיירפודס כבר נמצאות אצל קהל גדול, והשאלה היא אם מצלמות ויכולות AI יספקו סיבה טובה מספיק לשדרג לדור הבא.

אם המהלך יגיע לשוק ויצליח, החשיבות של המצלמות לא תהיה במספר הפיקסלים שלהן. השינוי יהיה בדרך שבה משתמשים ב-AI: במקום להוציא טלפון, לפתוח אפליקציה, לצלם ולכתוב שאלה, המשתמש פשוט יסתכל וישאל. עבור אפל, זו יכולה להיות דרך להפוך את סירי מעוזרת ששומעת את המשתמש לעוזרת שגם מבינה את מה שנמצא מולו.


הוספת תגובה

תגובות לכתבה:

הגב לכתבה

השדות המסומנים ב-* הם שדות חובה