La IA ambiental de Alexa puede alertarte de lo que ocurre en casa

Alexa, el asistente de voz omnipresente de Amazon, está recibiendo una actualización. La compañía reveló hoy algunos de estos cambios en un evento virtual. Uno de los desarrollos más interesantes es que los usuarios ahora pueden personalizar sus dispositivos habilitados para Alexa para escuchar eventos de sonido específicos en sus hogares.

Amazon también presentó nuevas características y productos, incluidos accesorios adicionales para dispositivos Ring y Halo, y acceso a dispositivos solo para invitados, como Always Home Cam y un lindo robot de boxeo de ritmo itinerante llamado Astro.

Las últimas capacidades de Alexa son parte del trabajo del equipo de Amazon en computación ambiental, un término general que se refiere a un sistema de inteligencia artificial subyacente que emerge cuando lo necesita y pasa a un segundo plano cuando no lo necesita. Esto se habilita a través de la red conectada de dispositivos y servicios de Amazon que interactúan entre sí y con los usuarios.

«Quizás el ejemplo más ilustrativo de nuestra IA ambiental es Alexa», dice Rohit Prasad, vicepresidente senior y científico jefe de Alexa en Amazon. Ciencia popular. “Porque no es solo un servicio de lenguaje hablado el que emites un montón de solicitudes. Como inteligencia ambiental que está disponible en muchos dispositivos diferentes a su alrededor, comprende el estado de su entorno e incluso actúa quizás en su nombre «.


Recomendado: ¿Qué es el Big data?.


Alexa ya tiene la capacidad de detectar lo que Prasad llama sonidos ambientales o eventos de sonido «globales». Estas son cosas como rotura de cristales, o una alarma de incendio, una alarma de humo que se dispara. Esos son eventos que hacen que su hogar sea más seguro mientras está fuera, dice. Si algo sale mal, Alexa puede enviarte una notificación. También puede detectar sonidos más inocuos como los ladridos de su perro o los ronquidos de su pareja.

[Related: How Amazon’s radar-based sleep tracking could work]

Ahora, Prasad y su equipo están tomando este modelo previamente entrenado para eventos de sonido globales que construyeron usando miles de muestras de sonido del mundo real, y están ofreciendo una forma para que los usuarios creen alertas para sus propios eventos de sonido personalizados agregando manualmente 5-10 ejemplos de un sonido específico que les gustaría que Alexa escuchara en casa. «Todos los demás tipos de datos que ha recopilado a través de nosotros se pueden utilizar para hacer que los eventos de sonido personalizados sucedan con menos muestras», dice.

Esto podría ser algo así como que los niños dejan abierta la puerta del refrigerador después de la escuela durante más de 10 minutos. “Los dos refrigeradores de mi casa hacen sonidos diferentes cuando uno de nuestros hijos deja la puerta abierta”, dice Prasad. De esa manera, incluso si no está en casa cuando están sus hijos, Alexa podría enviarle una notificación si alguien no cerró la puerta del refrigerador correctamente.

Puede configurar una alerta para un hervidor de agua que silba, una lavadora en funcionamiento, un timbre de la puerta que suena, un temporizador del horno que se apaga mientras está arriba. “Y si tiene una persona mayor en la casa que no puede oír bien y está viendo la televisión, si está conectada a un Fire TV, entonces puede enviar un mensaje en el televisor que dice que alguien está en la puerta y que sonó el timbre. ”, Dice Prasad.

Ring puede decirte los elementos específicos que ve fuera de lugar

Además de los eventos de sonido personalizados, Alexa también podría alertarle sobre ciertos eventos visuales a través de sus cámaras Ring y algunos dispositivos Ring. «Lo que descubrimos es que las cámaras Ring, especialmente para exteriores, [are] excelente para observar los estados binarios de los objetos de interés en sus hogares ”, dice Prasad. Por ejemplo, si tiene una cámara Ring frente a un cobertizo al aire libre, puede enseñarle a verificar si la puerta se ha dejado abierta o no proporcionándole algunas imágenes para el estado abierto y para el estado cerrado, y hacer que le envíe una alerta si está abierta.

[Related: Amazon’s home security drone may actually be less creepy than a regular camera]

Las grandes nuevas actualizaciones de Alexa y la búsqueda de Amazon por IA ambiental
Amazonas

«Ahora está combinando la visión por computadora y algunas técnicas de aprendizaje breves», dice Prasad. El equipo ha recopilado una gran muestra de fotos disponibles públicamente de puertas de garaje y cobertizos para ayudar con el entrenamiento previo, al igual que con el componente de audio de la IA ambiental. «Pero la puerta de mi cobertizo puede verse diferente del cobertizo que usted puede tener, y luego la personalización aún es necesaria, pero ahora puede suceder con muy pocas muestras».

Alexa pronto podrá conocer tus preferencias

El año pasado, Amazon actualizó Alexa para que, si no reconoce el concepto en la solicitud de un cliente, regrese a usted y le pregunte «¿qué quieres decir con eso?»

Esta podría ser una solicitud como: configurar mi termostato en modo de vacaciones, mientras que el modo de vacaciones es una configuración que no se conoce. Además, su preferencia por la configuración podría ser de 70 grados, en lugar de 60 grados. Ahí es donde los usuarios pueden entrar y personalizar Alexa a través del lenguaje natural.

“Por lo general, cuando tienes estos conceptos extraterrestres, o conceptos desconocidos y ambiguos, se requerirá alguna entrada, ya sea a través de etiquetadoras humanas [on the developer end] decir «modo de vacaciones» es un tipo de configuración para un aparato inteligente como un termostato «, explica Prasad.

Este tipo de datos es difícil de recopilar sin la experiencia del mundo real, y aparecen nuevos términos y frases todo este tiempo. La solución más práctica fue que el equipo desarrollara la capacidad de Alexa para el aprendizaje generalizado o la inteligencia artificial generalizada. En lugar de depender del aprendizaje supervisado de los etiquetadores humanos en Amazon, Alexa puede aprender directamente de los usuarios finales, lo que les facilita la adaptación de Alexa a sus vidas.

En unos meses, los usuarios podrán usar esta capacidad para pedirle a Alexa que conozca sus preferencias, lo que se inicia diciendo: «Alexa, aprende mis preferencias». Luego, pueden seguir un diálogo con Alexa para aprender sobre tres áreas de preferencias para comenzar: esas son las preferencias de alimentos, los equipos deportivos y los proveedores del clima, como la aplicación Big Sky.

Si dices, «Alexa, soy vegetariana», cuando Alexa te explica el diálogo, la próxima vez que busques restaurantes para comer cerca, recordará y priorizará los restaurantes que tienen opciones vegetarianas. Y si solo pide recetas para la cena, priorizaría las opciones vegetarianas sobre otras.

En el caso de los equipos deportivos, si ha dicho que le gustan los Boston Red Sox para el béisbol y los New England Patriots, y luego le pide a Alexa lo más destacado de los deportes en el programa Echo, obtendrá más momentos destacados personalizados para sus equipos preferidos. Y si a otro miembro de la familia le gustan otros equipos, también puede agregar eso a la preferencia.

[Related: The ‘artificial intelligence’ in your new smart gadget may not be what you think]

“Ya sabemos que los clientes expresan estas preferencias en sus interacciones habituales muchas veces al día”, dice Prasad. «Ahora estamos simplificando mucho el funcionamiento de estas preferencias». Puede seguir las indicaciones preestablecidas con Alexa para enseñarle sus preferencias o enseñarle en el momento. Por ejemplo, si le pregunta a Alexa por restaurantes y le recomienda restaurantes de carnes, puede decir, «Alexa, soy vegetariana», y automáticamente lo aprenderá para encuentros futuros.

“Estos tres inventos que hacen que lo complejo sea simple también ilustran capacidades de aprendizaje más generalizadas, con más aprendizaje auto supervisado, aprendizaje de transferencia y poco aprendizaje corto, y también aprendizaje profundo, para hacer que sucedan este tipo de diálogos interactivos”, Prasad. dice. “Este es el sello distintivo de la inteligencia generalizada”, que es similar a cómo aprenden los humanos.

Alexa aprende y crece

Estas tres nuevas funciones (sonidos personalizados, imágenes personalizadas y preferencias) no solo se unen para mejorar la IA, sino que también mejoran el autoaprendizaje, el autoservicio y la autoconciencia de Alexa de su entorno ambiental. «Alexa es más consciente de su entorno para ayudarlo cuando lo necesite», dice Prasad. Junto con una función como Rutinas o Blueprints, estos nuevos complementos le permiten a Alexa dar más respuestas personalizadas, sin requerir ningún dominio de codificación.

Alexa aprende automáticamente cómo mejorarse a sí misma a medida que la usa más. De hecho, Prasad dice que con más del 20 por ciento de los defectos que tiene Alexa, ahora se puede corregir automáticamente sin supervisión humana. «Si hizo algo mal y tú irrumpiste y dices que no, Alexa, quise decir eso», recordará eso para la próxima vez que pidas algo similar, dice.

En su caso, a veces, cuando le pide a Alexa que juegue a la BBC, registra lo que dice como BPC. “Para una IA, lo simple es difícil. De vez en cuando reconoce «reproducir BPC». Pero reconoce los patrones de uso ”, dice Prasad. De esa manera, puede corregir la solicitud automáticamente sin preguntar cada vez: «¿Te refieres a la BBC?»

[Related: If you’re worried about Amazon Sidewalk, here’s how to opt out]

“Este es el tipo de aprendizaje automático basado en el contexto tanto en su uso personalizado como en el uso de cohortes que Alexa puede ser mucho más inteligente en todo el mundo y tratar de estimar los defectos y corregirlos automáticamente sin ninguna intervención humana”, dice Prasad. “Si nos fijamos en los viejos tiempos del aprendizaje supervisado, incluso con el aprendizaje activo, Alexa dirá ‘esta es la parte con la que estoy teniendo problemas, obtengamos algo de información humana’. Ahora esa información humana proviene directamente del usuario final «.