مایکروسافت در حال ارائه به‌روزرسانی جدیدی برای قابلیت Copilot Vision در ویندوز اینسایدرز است که به ابزار هوش مصنوعی اجازه می‌دهد تمام محتوای نمایش‌داده‌شده روی صفحه شما را مشاهده کند. پیش از این، این قابلیت تنها قادر به بررسی هم‌زمان دو برنامه و ایجاد ارتباط میان آن‌ها بود، اما با اعمال این تغییر، می‌تواند کل دسکتاپ یا «هر پنجره مشخص مرورگر یا برنامه‌ای» را، بنا بر اعلام مایکروسافت، مشاهده کند.

برخلاف Recall که به‌طور خودکار از محتوای نمایشگر رایانه شما به‌صورت منظم عکس‌برداری می‌کند، کارکرد Copilot Vision بیشتر شبیه به اشتراک‌گذاری صفحه در یک تماس تصویری است. برای فعال‌سازی این قابلیت، تنها کافی‌ست روی آیکون عینک در برنامه Copilot کلیک کرده و دسکتاپ مورد نظر را برای مشاهده انتخاب نمایید.

هوش مصنوعی Copilot Vision مایکروسافت می‌تواند هر چیزی روی صفحه نمایش را اسکن کند

به گفته مایکروسافت، Copilot Vision می‌تواند «در تحلیل محتوا، ارائه بینش، و پاسخ‌گویی به پرسش‌های شما یاری‌رسان باشد و به‌صورت صوتی شما را در فرآیند راهنمایی کند». همچنین می‌توانید «پیشنهادهایی برای بهبود پروژه خلاقانه‌تان دریافت کنید، در اصلاح رزومه خود کمک بگیرید، یا هنگام کار با یک بازی جدید، از راهنمایی آن بهره‌مند شوید».

مایکروسافت نخستین بار در سال گذشته آزمایش قابلیت Copilot Vision را به‌عنوان ویژگی‌ای که می‌توانست آن‌چه را هنگام مرور وب در مرورگر Edge مشاهده می‌کنید درک کند، آغاز کرد. علاوه بر این، Copilot Vision قادر است به پرسش‌هایی درباره آن‌چه از طریق دوربین تلفن همراه شما می‌بیند، پاسخ دهد.