בקשת הפטנט שחושפת את התוכניות של אפל: עוזר AI שרואה, זוכר ומתערב

האייפון כבר יודע לסכם התראות ולהחליט איזו הודעה כנראה דורשת תשומת לב מיידית, אבל באפל חושבים על השלב הבא: מכשיר שלא רק מבין מה קורה על המסך, אלא גם מסתכל על המשתמש ומנסה להבין מה הוא עושה או עומד לעשות. בקשת פטנט שפרסמה החברה מתארת סוכן בינה מלאכותית שמסוגל לעקוב אחר הרגלי אכילה, לזהות נטילת תרופות, ללמוד דפוסים לאורך זמן ולהתערב כאשר הוא מזהה פעולה שעלולה להיות מסוכנת.

הבקשה, שמספרה US 2026/0227846 A1, הוגשה כבר בפברואר השנה ונחשפה החודש תחת הכותרת "ממשקי משתמש וטכניקות לניהול פעילות משתמש". היא אינה מתמקדת בסינון התראות רגילות, אלא במערכת שמשלבת מצלמות, מיקרופונים, חיישני תנועה, חיישני עומק ואמצעי קלט נוספים כדי לעקוב אחר פעולות שמתרחשות בעולם הפיזי. המכשיר יכול להיות טלפון, שעון, טאבלט, רמקול חכם, אביזר לביש או מערכת עם מסך ורכיבים נעים.

התרחיש המרכזי שמציגה אפל עוסק במשתמשת בשם ג'יין שמבקשת מהסוכן לעקוב במשך שבוע אחר הרגלי הנשנוש שלה. המערכת מזהה אותה שותה שייק, אוכלת תפוח או מתקרבת למזווה, מתעדת את המקרים ומפיקה בהמשך סיכום של שעות האכילה, התדירות וסוגי המזון. היא יכולה להציג את הסיכום על המסך, להשמיע אותו בקול או להעביר אותו לאפליקציית בריאות או תזונה במכשיר אחר.

אבל המעקב אינו מסתכם בתיעוד. בחלק מהמקרים המערכת מנסה להסיק מה המשתמש עומד לעשות עוד לפני שהפעולה התרחשה. אם ג'יין עוברת ליד המצלמה כשהיא מחזיקה שקית צ'יפס, המכשיר עשוי לתעד את האירוע כנשנוש גם אם לא ראה אותה אוכלת. אם היא מחזיקה תפוח נוסף זמן קצר אחרי שאכלה את הראשון, הסוכן עשוי להסיק שהיא עומדת לאכול גם אותו ולהזהיר שהדבר עלול להעלות את רמת הסוכר שלה.

בדוגמה נוספת המערכת יודעת שהמשתמשת אלרגית לבננות ורואה אותה שותה שייק. הסוכן פונה אליה ומציע לבדוק אם המשקה מכיל בננה. את המידע על האלרגיה הוא יכול לקבל מבקשה מפורשת, מאירוע קודם או אפילו משיחה שבה שמע את המשתמשת מספרת על האלרגיה לאדם אחר. תרחישים נוספים מתארים אזהרה מפני עוגייה שעלולה להכיל בוטנים או מפני אכילת מזון שאינו מתאים למצב רפואי מסוים.

אחד התרחישים הרגישים יותר עוסק בתרופות. המערכת מזהה שהמשתמשת נוטלת תרופה בשעה קבועה, ובהמשך רואה אותה מוזגת מיץ אשכוליות. עוד לפני שהיא שותה, הסוכן מזהיר אותה מפני אינטראקציה אפשרית בין המשקה לתרופה. את המידע הוא יכול לקבל מהמשתמשת, ממכשיר אחר, ממסד נתונים או ממקור אינטרנטי. במקום להסתפק בתזכורת קבועה לקחת תרופה, המערכת מנסה להבין את ההקשר הרחב שבו הפעולה מתרחשת.

הפטנט מתאר גם מצבים שבהם העוזר מציע בעצמו להתחיל לעקוב. בדוגמה אחת המערכת שומעת את ג'יין אומרת שרמת הסוכר שלה גבוהה לאחרונה, אף שהמשפט אינו מופנה אליה. הסוכן מציע לעקוב אחר המזון שהיא צורכת, אבל מתחיל לעשות זאת רק אחרי שהמשתמשת מסכימה. מכאן הוא לומד את ההרגלים, מזהה פעולות רלוונטיות ומחליט אם לשמור את המידע לסיכום עתידי או להתריע בזמן אמת.

המשמעות היא מעבר מעוזר דיגיטלי שממתין לפקודה לסוכן שפועל ברקע, אוסף הקשר ומתערב ביוזמתו. סירי במתכונת המסורתית מגיבה כשהמשתמש קורא לה ושואל שאלה. המערכת שמתארת אפל  נמצאת בחדר, מבחינה במתרחש, זוכרת מידע משיחות ואירועים קודמים ומנסה לקשר בין פעולה נוכחית לבין מצבו והעדפותיו של המשתמש.

המסמך אף מתאר מכשיר שמסוגל לנוע או לסובב חלקים מגופו כדי לשמור את המשתמש בשדה הראייה. כאשר ג'יין עוברת בחדר, המצלמה יכולה להסתובב בעקבותיה והדמות שמוצגת על המסך מפנה אליה את מבטה. כאשר הסוכן מזהיר אותה, הוא יכול להסתובב לכיוונה, להשמיע הודעה, להציג סמל מתאים ואף לבצע תנועה שמדמה נענוע ראש.

• אפל לא ויתרה על אייפון מזכוכית: דגמי ה־Pro של 2027 יקבלו עיצוב חדש
• אפל קיבלה המלצת מכירה: האנליסטים מזהירים מלחץ על הרווחיות ועל מחירי האייפון

התיאור מתחבר למחקר שפרסמה אפל בינואר 2025 על רובוט דמוי מנורת שולחן. החוקרים בחנו כיצד תנועות, מחוות וכיוון המבט גורמים לרובוט שאינו דומה לאדם להיתפס כבעל כוונה ותשומת לב. במקביל מגישה החברה בקשות פטנט נוספות למחשב בעל רכיבים נעים, שמזהה אנשים בחדר, מסובב אליהם את המסך או המצלמה ועוצר את התנועה כאשר מופיע מכשול. הצטברות המסמכים מצביעה על עבודה רחבה יותר סביב עוזר ביתי בעל נוכחות פיזית, גם אם צורתו הסופית עדיין אינה ידועה.

מבחינת אפל, החיבור בין רובוטיקה, בריאות ובינה מלאכותית יכול לפתוח קטגוריית חומרה חדשה ולהעמיק את השימוש במוצרים הקיימים. Apple Watch ואפליקציית הבריאות כבר אוספים נתונים על פעילות גופנית, שינה, דופק ותרופות. מכשיר שנמצא בבית ומבין מה המשתמש עושה יכול להוסיף שכבה חדשה של מידע התנהגותי ולהפוך את הנתונים הקיימים להמלצות ולהתערבויות בזמן אמת.

המערכת גם מרחיבה את הרעיון שעומד מאחורי Reduce Interruptions ו-Priority Notifications. כיום Apple Intelligence מנסה להבין אילו הודעות חשובות מספיק כדי להופיע בראש רשימת ההתראות ואילו אפשר לדחות. בפטנט החדש אותה לוגיקה יוצאת מהמסך אל החדר: לא רק האם הודעה מסוימת חשובה מספיק כדי להפריע, אלא האם הפעולה שהמשתמש מבצע מצדיקה שהמכשיר יקטע אותה.

המעבר הזה מעלה שאלות שהן לא רק טכנולוגיות. כדי לזהות מה אדם אוכל, איזו תרופה הוא לקח ומה נאמר בשיחה פרטית, המערכת צריכה להחזיק תמונה מפורטת של חייו. עיבוד מקומי במכשיר יכול לצמצם את החשיפה של המידע, אבל אינו פותר את שאלת הדיוק. כאשר האלגוריתם טועה בזיהוי תפוח או שקית צ'יפס מדובר בעיקר במטרד. כאשר הוא טועה בזיהוי תרופה, אלרגיה או אינטראקציה רפואית, המשמעות כבר רחבה יותר.

בקשת הפטנט מציגה למעשה את הדילמה שעומדת בפני הדור הבא של העוזרים הדיגיטליים. ככל שהם יודעים יותר על המשתמש, הם יכולים להיות שימושיים יותר ולהתערב ברגע הנכון. אבל כדי להגיע לשם הם צריכים לראות יותר, לשמוע יותר ולהסיק מסקנות גם כשהמשתמש אינו מדבר אליהם. אפל מנסה להפוך את העוזר הדיגיטלי ממי שמחכה להוראות למי שמבין את המתרחש בעצמו. השאלה היא לא רק אם המכשיר יידע מתי לדבר, אלא כמה המשתמש יהיה מוכן לאפשר לו לראות בדרך.

• מאסק רוצה להפוך את ה-AI לעסק הגדול בספייס X כבר בספטמבר
• עליבאבא רוצה לגבות על ההצלחה של Qwen: המודל יהיה פתוח - עד שהלקוחות יתחילו להרוויח