La idea de instalar una actualización de software en su refrigerador ya parece un poco extraña, y mucho menos una centrada en mejorar sus capacidades de inteligencia artificial. Pero eso es exactamente lo que le está pasando a La línea Samsung de refrigeradores a medida esta semana y, para mi sorpresa, este parche está dando grandes pasos para proporcionar un aprendizaje automático verdaderamente útil en una nevera moderna.

Como resumen rápido, Samsung ha ofrecido funciones impulsadas por inteligencia artificial como el reconocimiento automático de alimentos y la planificación de comidas en sus refrigeradores Bespoke durante un par de años. Sin embargo, como descubrí después revisando su modelo insignia a finales del año pasadolas capacidades de IA de la empresa aún son un trabajo en progreso. Anteriormente, el frigorífico podía reconocer alrededor de 60 tipos diferentes de alimentos frescos (como frutas y verduras) junto con otros 50 productos envasados, como yogur o palomitas de maíz. Parecía un comienzo decente, pero considerando la gran cantidad de artículos diferentes que puedes encontrar en una tienda de comestibles típica, estaba lejos de estar completo. Además, a menudo había que ingresar datos adicionales como la cantidad de artículos o cuándo se agregó algo por primera vez, lo que hizo que la idea del seguimiento de comestibles asistido por IA fuera más tediosa de lo que me gustaría. No sé ustedes, pero generalmente no quiero tener que escribir en mi refrigerador y estoy bastante seguro de que los ingenieros de Samsung están de acuerdo, lo que probablemente fue lo que provocó esta importante actualización de su software de refrigerador Bespoke.

El gran cambio es que Samsung está agregando soporte para Google Gemini, lo que tiene varias implicaciones importantes. Al combinar el reconocimiento de objetos existente en el dispositivo de Samsung con los modelos basados ​​en la nube de Google, el número total de alimentos identificables está aumentando de poco más de 100 artículos a más de 2.000. Ahora bien, esto significa que necesitarás conectar el refrigerador a Wi-Fi, pero considerando la cantidad de otras funciones inteligentes que admite, como la integración del calendario y la reproducción de video, no es una gran pregunta.

Otra actualización es que Samsung está usando Gemini para expandir los controles de voz, lo que permite a los usuarios pedirle al refrigerador que cambie cosas como la configuración del dispositivo, verificar detalles como cuándo se reemplazó el filtro de agua por última vez o incluso ayudar a solucionar problemas. Y dependiendo de la situación, el frigorífico puede incluso reproducir un tutorial sobre cómo solucionar el problema.

Alternativamente, para problemas más complicados o más difíciles de resolver, Samsung está introduciendo lo que llama Reliability AI, que está diseñado para monitorear los componentes del refrigerador o ayudar a identificar fallas antes de que se vuelvan demasiado graves. O, en los casos en los que es necesario reparar el dispositivo, la IA puede proporcionar información más detallada a los agentes y, al mismo tiempo, permitirles arreglar ciertas cosas de forma remota.

Por ejemplo, un representante de Samsung me dijo que si un cliente llama y dice que los cubitos de la máquina de hielo salen en grupos y pegados, Reliability AI podría permitir a los agentes reducir la cantidad de agua que se agrega a la bandeja de hielo, todo sin necesidad de ir físicamente a su casa. Fundamentalmente, Samsung dice que si bien el refrigerador monitoreará y rastreará las métricas de salud del dispositivo, los propietarios deberán brindar su consentimiento expreso para que el personal de reparación acceda a esos datos. Mientras tanto, si un problema requiere servicio en persona, Samsung dice que al compartir estos datos con los técnicos de reparación, permite a las personas identificar y resolver problemas más rápido en lugar de tener que llegar sin contexto y diagnosticar los problemas desde cero.

Mi unidad de prueba no ha tenido ningún problema mecánico en los ocho meses que la he estado usando, por lo que no he podido evaluar la capacidad de reparación de la IA de Samsung. Dicho esto, después de probarlo por primera vez en la sede de Samsung, tuve la oportunidad de usar una versión temprana del nuevo software de la línea Bespoke durante las últimas dos semanas, incluido su soporte actualizado para el reconocimiento de objetos basado en la nube, y la mejora es profunda. Incluso después de usarlo por un tiempo, todavía me sorprende la cantidad de alimentos diferentes que reconoce. En lo profundo de mi refrigerador tengo una lata de Salsa de chalota cabeza de toroque es un ingrediente bastante especializado de Taiwán que se utiliza casi exclusivamente en platos asiáticos. Sin embargo, la IA no tuvo problemas para reconocerlo, etiquetarlo automáticamente e incluir cuándo se agregó por primera vez al AI Food Manager del refrigerador.

Además de eso, el sistema ahora es mucho mejor a la hora de reconocer marcas y contar la cantidad de ingredientes específicos para crear listados más detallados. Puede distinguir entre una Coca-Cola Light y una Coca-Cola Zero y, al mismo tiempo, observar con precisión que había múltiplos de cada artículo. Y aunque el refrigerador a menudo tiene que hacer ping a un servidor basado en la nube en algún lugar para ayudar a reconocer varios elementos, los resultados aparecieron bastante rápido, a menudo en menos de unos segundos. Y para ciertos alimentos como los aguacates, me encantó que el refrigerador registre cuánto tiempo los has comido y mostrará una notificación de que podría estar a punto de caducar. Por supuesto, no siempre es correcto, pero todo lo que realmente necesito es un recordatorio para verificar las cosas y eso es precisamente lo que hace.

Sam Rutherford para …

También noté que el refrigerador ahora recuerda cuándo sacas con frecuencia un alimento específico y luego te pregunta si deseas agregar ese artículo a tu lista de compras. Es un buen recordatorio para reponer los alimentos básicos que usas regularmente y se realiza sin fricción, para que no resulte molesto. Desde allí, puedes simplemente revisar tu teléfono cuando estés en la tienda en lugar de tener que seleccionar manualmente una lista cada semana. Además, debido a que el refrigerador reconoce y rastrea mucho mejor lo que hay dentro, puede brindar mejores sugerencias sobre recetas que puede cocinar con ingredientes que ya tiene.

Dicho esto, como muchos modelos actuales, la IA no siempre detecta todos los detalles. Por ejemplo, inicialmente me impresionó cuando etiquetó automáticamente un bote de queso crema falso como «Philadelphia Plant-based», hasta que me di cuenta de que la etiqueta estaba incompleta y que la IA simplemente estaba leyendo lo que estaba escrito en la tapa y no tenía la inteligencia para terminar la descripción con precisión. No me malinterpretes, proporciona información más que suficiente para ayudarme a descubrir qué hay en el refrigerador cuando miro el Administrador de alimentos. Simplemente no es del todo acertado.

El único problema con esta actualización es que, como muchos servicios de inteligencia artificial actuales, el nuevo software de Samsung puede ser un poco demasiado confiado o propenso a alucinaciones. Una vez, mientras mi esposa estaba guardando algo en el refrigerador, el algoritmo tomó una fotografía de un vendaje de colores brillantes en su dedo y lo etiquetó como vegetal, lo cual no es en absoluto. Otras veces parece que simplemente adivina. Pero yo diría que pasar de alrededor de 100 elementos identificables a más de 2000 es una mejora muy bienvenida incluso con las limitaciones.

La otra cosa extraña es que, aunque Samsung está aprovechando los modelos de inteligencia artificial de Google para muchas de las nuevas funciones del refrigerador, no verá ninguna mención obvia a Gemini dentro del dispositivo. Eso es una lástima porque Bixby sigue siendo el único asistente digital que puedes usar y con el que puedes hablar directamente.

He dicho antes que el reconocimiento de alimentos mediante IA de Samsung es un trabajo en progreso y creo que sigue siendo cierto. Con esta última actualización, la compañía se ha acercado mucho más a cumplir la promesa de un refrigerador con funciones verdaderamente útiles impulsadas por IA. Lo que alguna vez pareció más bien una demostración tecnológica prometedora se ha convertido rápidamente en una herramienta útil para realizar un seguimiento de sus compras, incluso con algunos contratiempos aquí y allá.