iOS 18.2 Beta 2 presenta una API para que los desarrolladores habiliten el reconocimiento de contenido con Siri y Apple Intelligence.

iOS 18.2 beta 2 se lanzó para desarrolladores y evaluadores en el canal beta el lunes, mientras Apple prepara la próxima versión de su sistema operativo para teléfonos inteligentes que se espera llegue a principios de diciembre con funciones adicionales de Apple Intelligence. Los últimos cambios beta también incluyen soporte para una nueva interfaz de programación de aplicaciones (API) que permitirá a los desarrolladores brindar acceso al contenido en pantalla, permitiendo a Siri y Apple Intelligence enviar información a servicios de terceros para su procesamiento.

Apple presenta una API para la función de reconocimiento en pantalla de Siri

En el sitio web de Apple Developer, la empresa lo proporcionó documentos (con Macrumors) para una nueva API titulada ‘Hacer que el contenido en pantalla esté disponible para Siri y Apple Intelligence’ diseñada para permitir el acceso al contenido en pantalla, permitiendo a Siri y Apple Intelligence comprender cómo el usuario logra lo que logra.

Si un desarrollador agrega soporte para la API de contenido de pantalla, su aplicación proporcionará contenido de pantalla a Siri/Apple Intelligence cuando el usuario lo solicite explícitamente, según la compañía. Los datos de la pantalla del usuario pueden compartirse con servicios de terceros (como ChatGPT de OpenAI).

Apple también proporcionó un ejemplo de Siri accediendo al contenido en pantalla. Mientras navega por la web, el usuario puede decir o escribir “Hola Siri, ¿de qué trata este documento?” pidiendo a Siri que proporcione un resumen del documento.

Los desarrolladores pueden agregar soporte para reconocimiento de pantalla a navegadores, lectores de documentos, aplicaciones de administración de archivos, correo electrónico, fotografías, anuncios, hojas de cálculo y aplicaciones de procesamiento de textos. Apple dice que esta lista no es exhaustiva, por lo que más dispositivos deberían poder aprovechar la API en el futuro.

Es importante tener en cuenta que iOS 18.2 no será compatible con el nuevo Siri, que se espera que proporcione un rendimiento mucho mejor. Se espera que llegue a iOS 18.4 junto con soporte para acciones dentro de la aplicación, que Apple lanzará en abril de 2025, lo que es tiempo suficiente para que los desarrolladores agreguen soporte API a sus aplicaciones.

Fuente