Iryss, una aplicación que usa Machine Learning para identificar objetos

Hay innumerables características nuevas para aprovechar en iOS 11, pero muchas de ellas están bajo el capó en forma de API y requieren aplicaciones de la App Store para obtener el efecto completo.

Iryss es una nueva aplicación desarrollada por Florian Hebrard, más conocida por la comunidad jailbreak como Ziph0n, que aprovecha la nueva API CoreML (Machine Learning) de Apple para reconocer objetos a su alrededor en tiempo real.

Usar Iryss es tan simple como apuntar su cámara hacia algo. En cuestión de milisegundos, la aplicación adivina cuál es el objeto en el marco a modo de texto en la pantalla. Alternativamente, puede configurar la aplicación para anunciar detecciones de objetos en voz alta.

Iryss puede reconocer objetos animados e inanimados. En el caso de los animales, la aplicación es lo suficientemente inteligente como para discernir entre razas o especies comunes.

Hay un par de configuraciones que puedes configurar dentro de la aplicación Iryss para que funcione como quieras:

Aquí, puede forzar a la aplicación a anunciar lo que detecta en voz alta en lugar de solo mostrarlo como texto, y también puede habilitar la retroalimentación háptica para indicar la identificación exitosa del objeto. Debido a que la aplicación es compatible con anuncios, también encontrará una compra en la aplicación en este panel de preferencias para comprar los anuncios..

Entonces, ¿qué tan bien funciona la aplicación? Está bien, pero no es perfecto. Quizás más a menudo de lo que te gustaría, la aplicación identificará incorrectamente un objeto como algo que no es. Como un excelente ejemplo, esta máquina de chicles se detecta como una "botella de píldora", probablemente debido a los puntos de colores en el interior:

Una cosa que encontré que es un obstáculo significativo para la funcionalidad de la aplicación son las malas condiciones fotográficas. Para garantizar que obtenga las lecturas más precisas, le recomiendo que tenga las mejores condiciones de iluminación posibles y que esté lo suficientemente lejos de un objeto como para que todo esté en el marco.

El desarrollador me dice que si bien las detecciones de objetos no pueden ser correctas todo el tiempo, siempre se pueden mejorar. Gracias a lo simple que Machine Learning hace que los desarrolladores creen aplicaciones de esta naturaleza, las actualizaciones periódicas de Iryss deberían ser capaces de mejorar su precisión con el tiempo.

Iryss ciertamente parece un truco para la mayoría de los usuarios a primera vista, pero fuera de mi cabeza, puedo pensar en al menos dos usos en el mundo real en los que la aplicación podría ser útil, como:

  1. Cuando alguien es difícil de ver y necesita que el iPhone lo haga por él, Iryss puede hacer anuncios por voz para decirle a esa persona qué hay a su alrededor..
  2. Cuando los padres desean facilitar el aprendizaje de objetos / nombres para su hijo a una edad temprana, el niño puede jugar con Iryss para aprender sobre los objetos que los rodean y cómo se llaman.

Para otros usuarios, Iryss es realmente una aplicación de prueba de concepto con la que puedes jugar para divertirte.

Si estás interesado en probar Iryss por ti mismo, es una descarga gratuita desde la App Store. Es una excelente manera de ver de qué es capaz el Aprendizaje automático en iOS 11, y puede esperar que esta API haga posible muchas otras aplicaciones increíbles en el futuro.

¿Te gusta el concepto detrás de Iryss? Comparte tus pensamientos en los comentarios a continuación.