Uygulama Amaçları API'si: Siri'nin gelecekte ekran içeriğini bu şekilde okuması gerekiyor

sıcakkafa

Yeni Üye
Apple, sesli asistanın iPhone ekran içeriğini okumasını sağlayacak yeni bir Siri işleviyle uygulama kullanımına ilişkin ayrıntıları sundu. Ekran Farkındalığı olarak adlandırılan özelliğin, Apple Intelligence'ın bir parçası olarak (muhtemelen 2025 baharında) gelecek iOS 18 güncellemesiyle gelmesi bekleniyor ve diğer şeylerin yanı sıra, Siri'yi önemli ölçüde daha akıllı hale getirmeyi amaçlayan yeni bağlam işlevini tamamlıyor. cihaz dahil edilebilir.


Reklamcılık



Geliştiriciler için iOS 18.2'den testler


Apple'ın yeni bir geliştirici belgesinde belirttiği gibi, bu özellik için geliştiricilerin belirli bir prosedüre sahip olması gerekiyor. Ekranda görülen içerikleri Siri ve Apple Intelligence için hazırlamak için uygulamaların nasıl hazırlanması gerektiğiyle ilgili. API özellikleri, denenebilmesi için iOS 18.2'de zaten uygulanmıştır.

Görünüşe göre Apple ekran farkındalığını mümkün olduğunca gizlilik dostu hale getirmek istiyor. Yalnızca kullanıcı ekrandaki bir şey hakkında soru sorduğunda veya buna göre bir işlem yapmak istediğinde Siri ve Apple Intelligence içeriği görerek işlemi gerçekleştirebiliyor. Bunun yalnızca cihazda yerel olarak mı gerçekleştiği (Apple'ın aslında amaçladığı şey budur) veya Apple'ın özel bulut bilişiminin de kullanılıp kullanılmadığı şu anda belirsizliğini koruyor. Bilgiler yalnızca kullanıcının açık talebi üzerine üçüncü taraf hizmetlere iletilir. Örnek olarak Apple, bir web sitesinin görüntülendiğini ve ardından Siri'nin bunu özetlediğini belirtiyor. Bu şu anda Apple Intelligence ile mümkün, ancak tıklamanız gerekiyor.

Talep üzerine ChatGPT'ye yönlendirme


ChatGPT kullanmanın bir parçası olarak ekranda gösterilen fotoğraf veya belgelerin OpenAI'ye gönderilmesi de mümkün olmalıdır. Bu, örneğin görüntü açıklamaları oluşturmak veya PDF'leri analiz etmek için geçerlidir. Burada da veri akışından önce her zaman bir talep vardır. Siri, kullanıcılar sesli asistanın şu anda gerçekleştiremediği eylemleri talep ettiğinde, diğer şeylerin yanı sıra ChatGPT'yi de sunuyor. Apple yakında “Görsel Zeka” işlevinin bir parçası olarak görüntü açıklamalarını kendisi sağlayacak.

Apple, geliştirici belgesinde ayrıca “mevcut ve gelecekteki kişisel zeka özelliklerinin” Uygulama Amaçları çerçevesi aracılığıyla ekran içeriğinin açık bir şekilde paylaşılmasını gerektirdiğini belirtiyor. Bu nedenle, nispeten az sayıda iPhone uygulaması şu anda uygulama amaçlarını kullandığından, eski uygulamaların ekran farkındalığını desteklememesi düşünülebilir. Dolayısıyla bu durum hızla sinir bozucu hale gelebilir.





(bsc)