Apple’dan yeni Siri: Ekrandaki her şeyi tarayacak

Kullanıcıların uzun süredir eleştirdiği Siri, sonunda ekrandaki her şeyi görebileceği bir döneme giriyor. Şirket bu adımı neden şimdi atıyor? Cevap aslında açık: Google ve Samsung gibi rakiplerin ekranı bağlamsal olarak tarayan asistan çözümleri karşısında Apple’ın artık sessiz kalma lüksü kalmadı. Çünkü bugüne kadar sadece sesli komutlarla çalışan sistemler, akıllı telefon deneyiminde geride kalmaya başladı.

Peki bu yenilik günlük kullanımda tam olarak neyi değiştiriyor?

Yeni Siri ekrandakileri nasıl okuyacak?

Telefonunuzda gezinirken arkadaşınızın mesajla gönderdiği bir adresi ya da web sitesindeki bir tarifi tek tek kopyalayıp başka bir yere yapıştırma devri kapanıyor. Yeni nesil Siri, arka planda çalışan ekran analiziyle o an baktığınız arayüzü tarıyor ve gerekli eylemi doğrudan gerçekleştiriyor. Mesela bir arkadaşınız mesajda size akşam buluşmak için bir mekan önerdiğinde, asistana “Buraya nasıl giderim?” demeniz yeterli oluyor; çünkü sistem ekranda hangi mekanın adının geçtiğini zaten biliyor.

Şirketin bu derin entegrasyonu seçmesinin sebebi, kullanıcıların uygulamalar arasında sürekli geçiş yapmaktan yorulmuş olması. Ekran tarama özelliği sayesinde asistan, sadece bir komut aracı olmaktan çıkıp telefonun içindeki akıllı bir rehbere dönüşüyor.

Ekran Analizinin Teknik Altyapısı ve Veri İşleme

Eski nesil sesli asistanlar yalnızca mikrofondan gelen ses dalgalarını metne çevirip buluttaki sunuculara gönderiyordu. Yeni sistem ise telefonun grafik işlemcisi ve özel sinir ağı motoru (NPU) üzerinden anlık ekran görüntülerini frame frame işliyor. OCR (Optik Karakter Tanıma) ve görsel segmentasyon modelleri doğrudan cihazın içinde koşturduğu için, ekrandaki yazılar veya butonlar milisaniyeler içinde yapay zeka vektörlerine dönüştürülüyor.

Bu yerel işleme modeli, harici bir sunucuya her an ekran görüntüsü aktarılmasının önüne geçiyor. Böylece mobil veri tüketimi düşerken yanıt süresi de insan tepki süresinin altına iniyor. Ekrandaki bir menüye dokunduğunuzda veya asistanı çağırdığınızda, sistem o an aktif olan uygulamanın hiyerarşik yapı taşlarını (UI tree) okuyarak metnin nerede durduğunu, hangi görselin neyi temsil ettiğini anlıyor.

Hangi cihazlar bu özelliği destekleyecek?

Bu seviyede bir ekran analizi ve yapay zeka iş yükü, her eski işlemcinin altından kalkabileceği bir yük değil. Donanım gereksinimleri bu noktada kritik bir eşik oluşturuyor.

Tablodan da anlaşılacağı üzere, bu özellik eski nesil cihaz sahiplerini üzecek. Apple, donanım satışlarını tetiklemek için yapay zeka özelliklerini yeni nesil işlemcilere ve yüksek RAM kapasitesine kilitliyor. Yani telefonunuz birkaç yıllık amiral gemisi bile olsa, bu ekran tarama yeteneğinden mahrum kalma ihtimaliniz var.

Gizlilik ve Veri Güvenliği Dengesi

Gizlilik konusunda şirketin omuzlarında büyük bir yük var. Ekranınızdaki her şeyi tarayan bir yapay zekanın varlığı, akıllara verilerin nerede işlendiği sorusunu getiriyor. Cupertino merkezli dev, bu hassasiyeti aşmak için bulut tabanlı işlemlerin yanı sıra cihaz içi işleme ağırlık veriyor; ama yine de kullanıcıların bir kısmının bu duruma mesafeli yaklaşacağı kesin. Telefonunun ekranını tamamen okuyan bir asistana güvenmek, yeni bir adaptasyon sürecini zorunlu kılıyor.

Şirket, ekran bağlamını okurken hangi uygulamanın verilerinin cihaz dışına çıkmayacağını belirleyen katı kurallar uyguluyor. Özellikle bankacılık uygulamaları, şifre yöneticileri ve özel mesajlaşma pencereleri, ekran tarama algoritmalarının kapsamı dışına çıkarılıyor. Böylece hassas finansal bilgiler veya kişisel parolalar arka plandaki yapay zeka modelleri tarafından taranamıyor ya da saklanamıyor.

Önümüzdeki aylarda dağıtıma çıkacak güncellemelerle birlikte bu özelliğin ne kadar stabil çalışacağını ve kullanıcıların alışkanlıklarını gerçekten değiştirip değiştirmeyeceğini göreceğiz.