Apple Intelligence, iOS 18 y otros anuncios de IA y UX de Apple

Mi análisis al final, y un resumen rápido de las mejores funciones de IA en la revelación de la keynote de la WWDC "Apple Intelligence”' de 2024.

Hola a todos,

Todo el mundo espera una Siri renacida en la WWDC y una asociación con OpenAI junto con Apple Intelligence. Desplázate hasta mi análisis final al final.

En los 13 años transcurridos desde aquel lanzamiento inicial, Siri se ha vuelto un poco decepcionante, al igual que Amazon Alexa o Google Assistant. Con la promesa de la IA Generativa, todos esperamos versiones mejores de estos asistentes de voz.

No es ninguna sorpresa, ChatGPT (vía GPT-4o) se ha incorporado literalmente a Siri y a otros elementos compositivos de la Inteligencia de Apple.

La Inteligencia de Apple también se abrevia como "IA"

🍎 Apple ha sido históricamente un poco alérgica al término "IA". La empresa evitó durante mucho tiempo utilizar el acrónimo IA cuando hablaba de ella, prefiriendo decir aprendizaje automático. Pero empresas como OpenAI, Microsoft, Google, Amazon y Meta han popularizado el término y se apresuran a incorporar la IA a los servicios básicos, sobre todo en beneficio de Nvidia, que la impulsa.

¿Podrá Apple "ponerse al día" en IA con iOS 18 y nuevas capacidades para iPhones y dispositivos Apple en 2024 y 2025?

Apple se enfrenta a la presión de lucirse en IA

🍏 Más de 800.000 personas están viendo la WWDC hoy, lunes 10 de junio de 2024.

• VisionOS 2

• Mail: categorización en el dispositivo - primaria, nuevas categorías, negocios Email Digests,

• Tocar para cobrar

• Diario: vista de perspectivas, rachas de escritura, calendario, otras estadísticas divertidas

• Play Mode para iPhone

• Rediseño de la app Fotos de iOS, con una nueva vista unificada con una cuadrícula de fotos, vista de meses y años en la parte inferior, con un botón de filtro. Colecciones, navega por temas, por ejemplo, tiempo (días recientes), personas, viajes, etc.

• Gestos Airpods (asentir con la cabeza) para una comunicación silenciosa

• Apple TV+ InSight (por ejemplo, sobre actores, canciones, más información)

• watchOS 11 (nuevas formas de valorar tus entrenamientos, potente algoritmo de valoración de tu esfuerzo, por ejemplo, carga de entrenamiento)

• Nueva app: Vitals App, que comprueba tus métricas de salud diarias, en comparación con tu rango típico

• Aplicación de traducción de idiomas en Smart Stack (por ejemplo, notificaciones) en watchOS 11

• Fotos para Watch face, personalizadas para ti

• MacOS Sequoia

Sam Altman ha sido visto.

Se espera que Apple introduzca la IA en todas sus aplicaciones

Discurso de apertura de la WWDC en 18 minutos (Verge)

Mira lo más destacado para un rápido resumen:

La "Sama" está viva y en movimiento (como un hurón 🦦)

Apple ya ha publicado un artículo al respecto que revela muchos más detalles de los que esperamos de Apple. Se llama "Ferret-UI", un modelo multimodal de visión-lenguaje que entiende los iconos, widgets y texto de la pantalla del móvil iOS, y razona sobre sus relaciones espaciales y significados funcionales.

De hecho, Apple ha lanzado ocho SLM. Los nuevos modelos de IA de Apple, denominados colectivamente OpenELM por "Open-source Efficient Language Models" (Modelos de Lenguaje Eficientes de Código Abierto), están disponibles actualmente en Hugging Face bajo una Licencia de Código de Muestra de Apple.

Apple Intelligence

El nuevo sistema de inteligencia personal que personaliza todo mejor permitiendo el poder de los modelos Generativos al individuo, a partir de iOS 18.

1. Capacidades

• Idioma

• Imágenes

• Acciones

• Contexto personal

La Inteligencia de Apple se basa en tu contexto personal de todas tus apps. La Inteligencia de Apple puede procesar datos que te sean realmente útiles, al tiempo que prioriza la privacidad en su núcleo. Utiliza el procesamiento en el dispositivo. Conoce tus datos personales sin recopilarlos.

2. Arquitectura

Grandes modelos lingüísticos y de difusión especializados con un índice semántico. Muchos de estos modelos funcionan en el dispositivo.

Computación en nube privada

Servidores especiales con silicona de Apple cuando se requiere mayor computación enviando sólo los datos que son relevantes para la tarea. Una promesa criptográfica que establece un nuevo estándar para la privacidad y la IA, y desbloquea la inteligencia en la que puedes confiar.

Siri con la inteligencia de Apple

Siri realiza 1.500 millones de peticiones al día. Siri tiene 13 años.

Siri es ahora más natural, relevante y personalmente contextual.

Siri es, en general, más capaz, la demo mostró el conocimiento del contexto personal y las capacidades de acción. (por ejemplo, puede verificar de forma cruzada los detalles de un vuelo y hacer un seguimiento de los planes realizados en conversaciones casuales, por ejemplo).

Inteligencia de Apple

• Escritura mejorada en todo el sistema, por ejemplo Mail

• "Reescribir" emails, con sugerencias en línea, consiguiendo el tono adecuado (amistoso, profesional o conciso)

• "Corregir" (clavar la gramática, la estructura de las frases y otros automáticamente)

• "Resumir"

• "Respuesta inteligente"

• Procesar más fácilmente el email y navegar por tu bandeja de entrada (ver resúmenes)

• Elevar los mensajes prioritarios, situándolos en la parte superior ~ (mejor gestión de la bandeja de entrada)

• Las notificaciones también tienen estos nuevos conocimientos contextuales

• "Interrupciones reducidas"

  

Inteligencia de Apple - Autoexpresión

• Inteligencia Apple Emoji = "Genmoji" (encaja perfectamente con cualquier momento)

• Image playground, generar imágenes - sin necesidad de prompt (añadir previsualizaciones)

• Busca estilos y añádelos a tu zona de juegos de imágenes (bocetos, animaciones o ilustraciones)

• Varita mágica de imágenes (nueva herramienta en la paleta de herramientas), por ejemplo, puedes convertir imágenes de boceto

• Edición de fotos (nueva herramienta de limpieza)

• Graba y transcribe audio de un vistazo en Notas, con resúmenes de aprendizaje automático (o haz lo mismo con una llamada telefónica)

ChatGPT-4o Integrado en Siri

• Siri puede determinar si ChatGPT puede tener ideas para las respuestas (te pide permiso)

• ChatGPT integrado en las herramientas de escritura de todo el sistema con "Redactar"

• Accede a ChatGPT gratuitamente, y tu solicitud e información no quedarán registradas

• Por supuesto, los usuarios de ChatGPT Pro también pueden acceder directamente a esas funciones

• La integración de ChatGPT-4o llegará a finales de este año, con otros modelos fundacionales posibles también en el futuro (por ejemplo, tal vez Anthropic)

• Sirikit y App Intents para desarrolladores (nuevas funciones del SDK)

• Incorporación de la Inteligencia Generativa a xCode y finalización del código en el dispositivo

La Inteligencia de Apple estará disponible para probarla en EE.UU. en verano de 2024

Emocionante nuevo capítulo para la inteligencia personal en los dispositivos Apple.

Los 6 dispositivos de Apple

La Inteligencia de Apple aparece en todas las dimensiones de Apple:

Un aburrido repaso a la Inteligencia Artificial de Apple.

• Ver la Keynote de la WWDC 2024 1:46 ~ aquí.

Llámalo Aprendizaje Automático ⚙️

Se espera que la IA se incorpore en todo el sistema operativo (en iOS 18), y éstas son algunas de las formas en que se rumorea que Apple la utilizará:

• Retoque fotográfico, como la eliminación de objetos no deseados.

• Transcripción de notas de voz.

• Respuestas sugeridas a emails y mensajes.

• Emojis personalizados generados automáticamente en función del contenido de los mensajes de un usuario.

• Recapitulación inteligente de notificaciones y mensajes perdidos.

• Búsqueda web en Safari mejorada y búsquedas más rápidas en Spotlight.

• Listas de reproducción de Apple Music generadas automáticamente en función de la información facilitada por el usuario, como su estado de ánimo.

• Escritura asistida por IA en Pages.

• Creación de diapositivas asistida por IA en Keynote.

• Escritura de código con IA en Xcode para desarrolladores.

• Mejoras en Siri que integran modelos de lenguaje amplio (LLM), como capacidades de conversación natural y personalización mejorada para el usuario.

Eso es todo en pocas palabras.

Análisis

La WWDC 2024 nos proporcionó nuestro primer vistazo a las funciones de IA que llegarán a los dispositivos de Apple y algunas actualizaciones importantes en los sistemas operativos de la empresa.

Creo que para la IA Generativa lo más destacado tiene que ser que Apple está integrando ChatGPT en experiencias dentro de iOS, iPadOS y macOS, permitiendo a los usuarios acceder a las capacidades de chatgpt. Esto abre la puerta a cómo Apple puede asociarse con empresas como Anthropic, Google y otras. Establece un templates. Y realmente pone a OpenAI al alcance de los usuarios de iPhone.

Curiosamente, no se trataba sólo de Siri, sino que ChatGPT estará disponible en las Herramientas de Escritura de Apple para todo el sistema, con el fin de ayudar a los usuarios a generar contenido para cualquier cosa sobre la que estén escribiendo. Los usuarios también pueden aprovechar las herramientas de imagen de ChatGPT para generar imágenes en una amplia variedad de estilos para complementar lo que están escribiendo.

Necesitarás al menos el iPhone 15 Pro de gama alta de este año si quieres ejecutarlo con la Inteligencia de Apple en tu teléfono. Por supuesto, es un empujón para que actualices tu dispositivo. Gracias a la Inteligencia de Apple, Siri puede ahora manejar los tropiezos en el habla y comprender mejor el contexto, lo que francamente es algo importante para quienes interactúan con el ecosistema de Apple con más frecuencia.

La empresa que antes se negaba a utilizar el término "inteligencia artificial" al hablar de sus funciones de aprendizaje automático está ahora dispuesta a asociarse con la startup de IA con más éxito en modelos generativos, OpenAI, y es un hito para la legitimidad de la tecnología.

La Inteligencia de Apple te permitirá hacer todo tipo de cosas cuando se lance en versión beta este otoño y, en particular, te ayudará a gestionar mucho mejor la bandeja de entrada de tu email, junto con un buen número de funciones que quizá utilices con menos frecuencia.

La incursión de Apple en los Modelos Generativos no rompe ningún acuerdo y no representa un nuevo paradigma, pero demuestra que Apple está pensando cuidadosamente en estas cosas para aumentar la experiencia de sus productos.

El hecho de que OpenAI se adelantara a Google en esta asociación en 2024 demuestra lo extrañas que se han vuelto las cosas. En el último momento, en abril y mayo, según un informe de Bloomberg, a pesar de las conversaciones en curso con Google sobre su IA Gemini, Apple llegó a un acuerdo con OpenAI. Incluso mencionó "ChatGPT" varias veces por su nombre en la keynote de la WWDC 2024. Fue un momento extraño y surrealista.

Apple también tiene muy claro con OpenAI que hace hincapié en la privacidad del usuario. Las protecciones de privacidad están integradas cuando se accede a ChatGPT desde Siri y las Herramientas de Escritura: las solicitudes no son almacenadas por OpenAI y las direcciones IP de los usuarios quedan ocultas. Los usuarios también pueden elegir conectar su cuenta de ChatGPT, lo que significa que sus preferencias de datos se aplicarán bajo las políticas de ChatGPT. Más o menos lo contrario que Microsoft, que con Recall (en Windows) parece no preocuparse por los datos de los usuarios ni por su seguridad.

La cuidadosa aproximación de Apple a los modelos Generativos sí mejora enormemente la forma en que los usuarios pueden resumir, responder y utilizar las herramientas de escritura. Las nuevas Herramientas de escritura de Apple están disponibles en todo el sistema, incluso en aplicaciones de terceros. Las mejoras incluyen la posibilidad de reescribir tu copia existente, cambiar el tono del lenguaje, resumir un mensaje en formato "TLDR" y escribir Respuestas Inteligentes a los mensajes.

Obtener acceso a estas nuevas funciones del modelo Generativo también forma parte claramente del ciclo de ventas. La empresa afirma que las funciones de IA sólo estarán disponibles en el iPhone 15 Pro y 15 Pro Max y en iPads o Macs con chips M1 o posteriores, y sólo cuando su idioma esté configurado en inglés. Las prestaciones empezarán a desplegarse este otoño en iOS 18, iPadOS 18 y macOS Sequoia.

Después de todo, la WWDC 2024 no fue una gran revelación. Apple Intelligence es el nuevo sistema de inteligencia personal de la empresa "que pone potentes modelos generativos en el núcleo de tu iPhone, iPad y Mac, y su asociación con OpenAI y la integración de ChatGPT significa que, después de todo, el iPhone será un dispositivo nativo de IA más potente". El iPhone es ahora más amigable con el aprendizaje automático en un sorprendente número de formas que sirven y mejoran exquisitamente la experiencia del usuario.

La Inteligencia de Apple viene con un gran énfasis en la seguridad, ya que el sistema decidirá automáticamente si necesita utilizar el procesamiento en el dispositivo o ponerse en contacto con el servidor privado de computación en nube de Apple para satisfacer tu solicitud. La Inteligencia de Apple, tal y como se explicó en la keynote de la WWDC para 2024, no es un gran impulso, sino un impulso medianamente pequeño. Pero los usuarios esperaban una Siri más inteligente y algunas funciones mejores y eso es exactamente lo que obtendrán, realmente no hay grandes sorpresas.

Esto es Apple sumergiéndose cautelosamente en el poder de los Modelos Generativos. Apple confía en los LLM para ayudar a Siri a entender mejor lo que dices y hacer un seguimiento de las peticiones y preguntas. Apple también está haciendo hincapié en el procesamiento en el dispositivo siempre que sea posible.

Sin duda, la experiencia completa de Apple está mejorando, y afirma que sus funciones de IA pueden hacer cosas como referenciar una app para que realice una acción en otra, como pedirle que reproduzca un podcast que te ha enviado tu pareja. Pero, ¿la Inteligencia multimodal de Apple va a cambiar las reglas del juego para los consumidores? No lo creo. No hubo ni un solo momento de conmoción y pavor en toda la presentación de la WWDC 2024.

Apple está incorporando ChatGPT a Siri y fue aburrido oír hablar de ello. La Inteligencia de Apple te permitirá hacer todo tipo de cosas cuando se lance en versión beta este otoño y, sin embargo, ninguna de esas cosas parece una revelación o algo que entusiasme a la mayoría de los consumidores. Siri determinará automáticamente si una consulta sería más adecuada para ChatGPT. Entonces te pedirá permiso antes de enviar su solicitud a ChatGPT. Suena casi intrusivo.

Cuando invoques a Siri, Apple dice que tiene "conciencia en pantalla", lo que significa que puede entender lo que le estás preguntando y "actuar con el contenido de los usuarios en más apps a lo largo del tiempo". La Inteligencia de Apple, el producto de inteligencia artificial de la empresa, es un concepto atractivo, pero es un producto muy seguro. No pude evitar sentirme decepcionado con el resultado de la keynote de la WWDC. Las aplicaciones de terceros también podrán aprovechar algunas de las mejoras de Siri y esperemos que los desarrolladores hagan algo más con todo esto y consigan que los iPhones se sientan realmente como dispositivos de IA, por mucho tiempo que eso lleve.

Apple está desplegando un montón de nuevas funciones de IA en sus aplicaciones en iOS 18, incluida una forma de resumir emails y generar respuestas. Podrían ahorrarte tiempo y hacerte la vida un poco más cómoda. Algunos de los avances de watchOS parecen impactantes. La Inteligencia de Apple personaliza la IA al usuario y eso es un buen avance. La presentación estuvo plagada de avances de "contexto personal" que Apple pregonó ampliamente en multitud de nuevas funciones. Esta mejora del conocimiento contextual de Siri y del sistema de Apple significa que se siente un poco más inmersivo que antes.

Apple está llevando la IA a la aplicación Fotos y a Apple Mail como nunca antes lo había hecho, y golpea fuerte teniendo en cuenta que muchos de nosotros utilizamos esas funciones a diario. Craig Federighi, de Apple, dijo que los modelos generativos detrás de la Inteligencia de Apple estarían disponibles en iOS, iPadOS y macOS. En los últimos meses, Apple ha investigado mucho sobre los pequeños modelos lingüísticos.

Capacidades de la Inteligencia de Apple

• Notificaciones basadas en el contexto: La Inteligencia de Apple puede reconocer qué notificaciones son importantes para tu contexto personal.

• Mejoras de redacción: La Inteligencia de Apple introducirá mejoras de corrección y estilo en todo el sistema, tanto en apps de terceros como nativas.

• Generación de imágenes: La Inteligencia de Apple puede crear fotos generativas basadas en tu fototeca, de forma similar a otras plataformas. Hay tres estilos: Boceto, Ilustración y Animación.

• Tareas entre aplicaciones: La Inteligencia de Apple puede adentrarse en tus aplicaciones y ejecutar tareas en tu nombre. Uno de los ejemplos que dio Federighi fue pedir a la Inteligencia de Apple que sacara archivos enviados por un contacto durante un determinado periodo de tiempo.

• Centrarse en el contexto personal: Apple Intelligence puede recurrir al conjunto completo de tu actividad, pero también a lo que hay en tu pantalla. Por ejemplo, puedes preguntarle si una reunión programada hará que llegues tarde a un compromiso personal, dijo Federighi.

• Computación en nube privada: La Inteligencia de Apple aprovechará modelos basados en la nube en servidores especiales que utilizarán Apple Silicon para garantizar que los datos de los usuarios sean privados y seguros. Si una solicitud tiene que ir a un servidor en la nube, Apple dice que sólo enviará una selección limitada de datos de forma "criptográficamente" segura.

Apple está integrando la IA Generativa, aunque sólo se refiere a ella como modelos generativos. Un poco como cuando se refieren a la IA como aprendizaje automático.

Aún así, resulta un poco incómodo que ChatGPT vaya a vivir dentro de mi iPhone. ¿Por qué no podían integrarlo en la Inteligencia de Apple de alguna manera que no fuera demasiado marca? Mantén a raya a las startups financiadas por Microsoft, no me importa que utilicen GPT-5 dentro de un iPhone en general. OpenAI debería haber estado definitivamente más en segundo plano. Esto resta credibilidad a Apple.

La mayoría de las funciones de IA que Apple anunció como parte de la Inteligencia de Apple no serán especialmente impactantes para la mayoría de los usuarios, pero juntas mejoran el iPhone como una especie de primer dispositivo global nativo de IA. Eso es algo incluso si Apple es torpe en su propia investigación y desarrollo de IA. Muchos de esos modelos funcionarán en el dispositivo y el énfasis de Apple en el contexto personal y la personalización ha sido quizá su mejor decisión. La IA en la era del contexto personal, la seguridad y la privacidad, la Inteligencia de Apple es una marca muy segura de lo que los modelos Generativos pueden añadir al increíblemente refinado ecosistema de Apple.

¡Hasta la próxima!