עידן המכונות הפעילות: קופיילוט ותפעול יישומים ב-Windows 11

השבוע הוסיפה מיקרוסופט תכונה חשובה ל-CoPilot Studio, שהיא בבחינת קפיצת דרך לבינה המלאכותית היוצרת: היכולת לתפעל יישומים ב-Windows 11 – ולמעשה, להשתמש במחשבים המבוססים על מערכת ההפעלה העדכנית שלה. היכולת החדשה מאפשרת לסוכנים חכמים (סוכני AI) לבצע פעולות מול אתרים ויישומים מקומיים. התכונה, המכונה Computer use, דומה למה שמציעה האחות מבית, OpenAI, עם Operator, והמתחרה, Claude, עם תכונה באותו השם. ההבדל הוא שכאן זוהי תכונה המפותחת תחת קורת הגג של מיקרוסופט, שגם מייצרת את מערכת ההפעלה, ולכן יש לשער שהסינרגיה עם היישומים של Windows 11 הפופולרית תהיה משמעותית.

התכונה החדשה מאפשרת לבינה המלאכותית לתפעל ישירות יישומים במחשב כאילו הייתה בן אדם, לרבות לפתוח אותם, להזין טקסט בשדות וללחוץ על כפתורים, לדוגמה. עסקים יוכלו להשתמש בה כדי להגיע לרמות אוטומציה חדשות ולהחליף עובדים אנושיים במלאכות חזרתיות כמו הזנת נתונים, ביצוע מחקרי שוק או אפילו הזנה ועיבוד של חשבוניות, במקום מנהלי חשבונות. לטענת מיקרוסופט, התכונה החדשה תהיה אפילו מסוגלת להתמודד עם שינויים בממשק וכפתורים שעברו דירה, מבלי שתזדקק לעזרה בעקבות השינוי. אציין, אגב, שהתכונה הזו מצטרפת לתכונה מקבילה בגרסה הצרכנית, בשם Actions, שמאפשרת לבצע אוטומציה של דברים כמו הזמנת כרטיסי טיסה דרך אתרים, תורים למסעדות ועוד. עיקרון הפעולה זהה.

"מחשב יכול לאפשר לסוכנים לבצע פעולות עם אתרים ויישומי שולחן עבודה, על ידי לחיצה על כפתורים, בחירה בתפריטים והזנת מידע לתוך שדות על המסך", הסביר בהודעה לעיתונות צ'ארלס לאמנה, סגן נשיא תאגידי לקופיילוט לתעשייה ולעסקים. "זה יאפשר לסוכנים לטפל במשימות גם כשאין ממשק תכנות יישומים (API) זמין להתחבר אליו במערכת. אם אדם יכול להפעיל את היישום – גם הסוכן יוכל".

בינה מלאכותית וחוזי

התכונה הזו של שימוש במחשב, היא שדרוג או המשך ישיר לתכונה מרעישה אחרת שמיקרוסופט הכריזה עליה לפני כמה שבועות, בדיוק ביום הולדתה ה-50, והיא CoPilot Vision. במסגרת התכונה הזו, הבינה המלאכותית מבית מיקרוסופט יכולה "לראות" היישומים על המחשב שלכם (וגם את הסביבה) וללוות אתכם בעשייה. בהדגמות שנערכו לעיתונאים בחו"ל, קופיילוט סייעה למשתמשים במשחקים לימודיים כמו מיינקראפט והסבירה כיצד לבצע פעולות בפוטושופ, ואחת התכונות המסקרנות שלה היא חיפוש קבצים בסייר הקבצים. ראוי לציין שמיקרוסופט למדה מפיאסקו הפרטיות שליווה את ההשקה של Recall, ועכשיו Copilot Vision תפעל רק כשהמשתמש ילחץ על צירוף המקשים Alt ורווח למשך שתי שניות רצופות. התכונה הזו הייתה, למעשה, זמינה בדפדפן Edge בשנה שעברה, וכעת היא מתרחבת לכלל היישומים במחשב – כרגע בפריסה הדרגתית ולמנויים משלמים. מה שכן, החל מהשבוע, התכונה הזו זמינה בחינם לכל משתמשי Edge.

באותה ההכרזה, מיקרוסופט דילגה בקלילות מעל המתחרות בכך שהכריזה על התכונה הזו באופן מסחרי. מקץ כמה ימים, גוגל מיהרה להשיב אש מתוך Project Astra שלה, וכעת גם ג'מיני יכול לראות את הסביבה שלכם דרך המצלמה ולהשיא עצות. אמש (ב') ניסיתי את זה בזמן אמת עם החתול שלי, וזה עובד מצוין: ג'מיני ידע לזהות את הגזע שלו (סיאמי מעורב) ולזהות שהוא מתכרבל על כרית ומנקה את פרוותו – והכול בזמן אמת. לגוגל, אגב, יש גם מקבילה ניסיונית ל-Copilot Vision בשם Project Mariner, שפועל על כרום והוכרז בדצמבר האחרון, אולם נראה שמיקרוסופט, עם השימוש במחשב שלה ויכולות ההתבוננות במסך לבינה המלאכותית שלה בזמינות מסחרית, עשתה קפיצה גדולה קדימה.