IDS NXT malibu con IA integrada en la cámara, compresión y streaming

Cámara IDS NXT delante de un fondo de color

Nuevo: Streaming 4K con una calidad de imagen perfecta directamente de la cámara

Tras el lanzamiento de la serie IDS NXT malibu con el sensor onsemi AR0521, IDS amplía la gama de sensores disponibles con el Starvis 2 IMX678 de Sony para streaming en 4K. Esto significa una mejor calidad de imagen, una mayor riqueza de detalles y nuevas posibilidades de aplicación, sobre todo en entornos con poca luz.

La tecnología de consumo se da la mano con el procesamiento industrial de imágenes. Pero esto no es todo.

De la colaboración entre IDS y Ambarella ha surgido una nueva clase de cámaras industriales inteligentes: IDS NXT malibu combina una calidad de imagen perfecta con IA integrada en la cámara, compresión de vídeo y streaming. Todo ello directamente en la cámara y desde la cámara.

IDS es el primer fabricante que ofrece este chip especial —hasta ahora solo presente en las cámaras de acción— para su uso en aplicaciones industriales. Un ISP integrado con funciones automáticas muy prácticas para el brillo, el ruido y la corrección del color permite obtener una calidad de imagen óptima. Obtenga fotos y vídeos impresionantes ¡y mucho más! Encontrará más información sobre las actualizaciones más destacadas del software de IDS NXT malibu en la pestaña Versión 4.1.

Cámara malibú IDS NXT con IA e icono de transmisión RTSP: analiza y visualiza situaciones

IA e ISP "on the edge": Valoraciones y visualizaciones sin PC

La cámara funciona como un dispositivo edge y posibilita flujos de vídeo comprimidos (H264) con sensor de resolución completa a alta velocidad (> 25 fps) y salida a dispositivos terminales a través del protocolo RTSP.

Además, la imagen en directo de la cámara se puede reproducir directamente en cualquier navegador web a través de streaming de vídeo HTTP en formato comprimido MJPEG, sin superposición de IA y sin necesidad de ningún software adicional.

Con IDS NXT malibu hemos desarrollado una serie de cámaras capaz de analizar imágenes en tiempo real e integrar los resultados directamente. Esto la hace idónea para aplicaciones que requieren una imagen en directo con superposición de IA, por ejemplo" explica Kai Hartmann, Director de Innovación de Producto de IDS. El modelo ya está disponible de serie.

¿Qué posibilidades le ofrecen las cámaras industriales inteligentes para sus aplicaciones? Procesamiento de imágenes de última generación: descubra ahora todas las posibilidades del sistema IDS NXT.

IDS NXT 4.1: ¡Máxima funcionalidad para la IDS NXT malibu!

MJPEG es una alternativa al streaming vía RTSP

Con el nuevo formato de streaming MJPEG ambos modelos malibu (con sensor onsemi AR0521 o Sony IMX678) le ofrecen una función de visualización en Full HD muy fácil de usar. El streaming utiliza el protocolo HTTP y puede reproducirse en directo en cualquier navegador sin necesidad de plug-ins adicionales. Y para aquellos que deseen imágenes en directo con superposición de IA, también está disponible la opción de streaming a través de RTSP. Esto supone emplear la resolución máxima del sensor, lo que en el caso del IMX678 significa, nada más y nada menos, que calidad 4K a 30 fps.

Clasificar y detectar objetos y anomalías con redes neuronales autoentrenadas

La nueva versión de software IDS NXT 4.1 permite entrenar redes neuronales con el AI Vision Studio IDS lighthouse para el SoC de Ambarella de la familia de cámaras IDS NXT malibu. Esto significa que, a partir de ahora, puede crear y ejecutar apps de visión artificial personalizadas para la clasificación y detección de objetos y anomalías con esta plataforma de cámara.

IDS NXT 3.2 - Asistente de usuario optimizado gracias a la nueva vista de proyecto

La actualización gratuita de AI Vision Studio IDS lighthouse mejora la facilidad de uso y aporta mayor claridad gracias a un nuevo asistente por proyectos que guía al usuario paso a paso y a un acceso más fácil a los resultados en el editor basado en bloques.

Vista del flujo de trabajo con iconos de todas las fases

Vista de proyecto

El nuevo asistente de usuario permite gestionar de forma agrupada los conjuntos de datos gráficos, redes neuronales y aplicaciones de visión artificial que pertenecen a un mismo proyecto. El flujo de trabajo guía al usuario paso a paso por todas las fases del proceso de desarrollo de la aplicación.

Los iconos y observaciones que aparecen según el estado aportan mayor claridad a cada paso del proceso. De este modo el usuario puede ver rápidamente qué componentes se han configurado ya con éxito o qué acciones tiene que realizar aún.

Con ello, IDS lighthouse ayuda todavía mejor al usuario a desarrollar sus propias aplicaciones de visión artificial basadas en IA.

Encontrará las notas de versión directamente en IDS lighthouse.

IDS NXT 3.1 - OCR y búsqueda de objetos en el editor basado en bloques

La nueva actualización amplía la funcionalidad del sistema para incluir el procesamiento de imágenes basado en reglas, como el OCR, y la búsqueda de objetos sin una CNN entrenada. Además, la nueva versión proporciona a los clientes unos flujos de trabajo mejorados y una integración más sencilla a través de OPC UA.

Reconocimiento de texto

La actualización incorpora la función de procesamiento de imágenes OCR (reconocimiento óptico de caracteres, por sus siglas en inglés) en el editor basado en bloques. Esta función permite detectar y leer en la imagen caracteres alemanes e ingleses, así como palabras y líneas enteras de texto en etiquetas, tarjetas de visita y otros documentos. A partir de esta información se pueden consultar determinados valores o propiedades.

Encontrar objetos sin IA

IDS NXT incorpora desde hace ya mucho tiempo una función de reconocimiento de objetos basada en IA. Pero, ¿y si necesita encontrar objetos sin una red neuronal previamente entrenada? Ahora, nuestro editor basado en bloques ofrece también esta posibilidad. Los objetos se determinan a partir de valores de luminosidad. Seguidamente, se pueden filtrar y clasificar conforme a otros criterios adicionales.

Visualización optimizada gracias a mapas de atención

Ahora, en nuestro AI Vision Studio IDS lighthouse puede generar para cada conjunto de datos de prueba una visualización basada en mapas de atención. Esto le permite comprobar la inferencia con sus propias imágenes, reproducir visualmente las decisiones de la IA y evaluar la calidad de la red neuronal entrenada.

Acceso más sencillo a través de OPC-UA

Además de la Companion Specification estándar para sistemas de visión artificial, ponemos a su disposición un modelo propio de información muy intuitivo para acceder a IDS NXT a través de OPC-UA. IDS NXT 3.1 amplía este modelo para facilitar aún más la integración mediante OPC-UA en aplicaciones como, por ejemplo, la automatización de plantas de producción.

IDS NXT 3.0: nuevo método IA para la detección de anomalías

Con la versión de software IDS NXT 3.0 ampliamos la funcionalidad de este sistema integral de IA para incluir, entre otros, un nuevo procedimiento de aprendizaje profundo y garantizar una mejor trazabilidad en el entrenamiento de redes neuronales.

Detección de anomalías

Junto con la detección y clasificación de objetos, ahora puede utilizar las cámaras IDS NXT para la detección de anomalías. Con solo unos pocos datos de entrenamiento el sistema identifica de forma fiable las discrepancias con el proceso tanto conocidas como desconocidas. Esto reduce el esfuerzo necesario para generar y anotar los datos de entrenamiento.

Lector de códigos

Con la nueva función de lectura de códigos del editor basado en bloques podrá habilitar de forma rápida y sencilla las cámaras IDS NXT para la localización, identificación y lectura de distintos tipos de códigos y parámetros asociados.

Proceso de entrenamiento transparente

Los mapas de atención muestran ya durante el proceso de entrenamiento y prueba qué áreas de la imagen influyen en los resultados de clasificación. De este modo se pueden detectar y eliminar de forma temprana fallos o sesgos antes de que la IA empiece a funcionar en la cámara. Esto reduce los bucles de revisión y mantenimiento durante el proceso de desarrollo y acelera, por tanto, la puesta en servicio.

IDS NXT 2.6 - App your camera!

Esta versión del software se centra principalmente en simplificar la creación de apps. Iniciar un trabajo de desarrollo suele ser uno de los mayores retos a la hora de llevar a cabo un proyecto. Con la ayuda del nuevo asistente de aplicaciones (Use Case Assistant) de IDS lighthouse, podrá configurar en pocos pasos una app de visión artificial completa, que podrá ejecutar directamente en una cámara IDS NXT. Otra novedad es el editor basado en bloques, que permite a los usuarios desarrollar sus propias secuencias de programas con funciones de procesamiento de imágenes de IA, como el reconocimiento o la clasificación de objetos, sin necesidad de tener conocimientos de programación.

Asistente de aplicaciones (Use Case Assistant)

En el asistente de aplicaciones seleccione el caso de uso que se adapte a su proyecto. Con preguntas y consejos, como en una entrevista, el asistente le guía en el proceso de creación de la app de visión artificial y crea el código del programa. Para ello vincula los proyectos de entrenamiento existentes con el proyecto de la app de visión artificial o crea nuevos proyectos de entrenamiento y conjuntos de datos en IDS lighthouse según sea necesario.

Editor basado en bloques (Block-based Editor)

Gracias a los bloques combinables y a la intuitiva interfaz de usuario, cualquiera puede realizar sus propios proyectos de procesamiento de imágenes basado en IA (como la detección o clasificación de objetos) en forma de app de visión artificial personalizada sin tener que conocer la sintaxis de un lenguaje de programación específico. Usted mismo crea el proyecto de app de visión artificial y utiliza los bloques predefinidos del editor de código para construir gráficamente su app, incluyendo procesos como bucles y condiciones.

Matriz de confusión

En el área "Sesiones de entrenamiento" de la pestaña "Entrenamiento" de IDS lighthouse puede visualizar una matriz de confusión para las redes de clasificación que haya entrenado a partir de la versión 2.6. La matriz de confusión es adecuada para evaluar el rendimiento de su red de clasificación y muestra cómo se clasifican los datos de prueba o de validación en comparación con las etiquetas asignadas.

Aplicaciones multicámara en IDS NXT cockpit

Ahora puede supervisar el estado de la cámara y las imágenes y los resultados de varias cámaras en una sola pantalla, y mantenerse al día con sus aplicaciones. Además la configuración, incluido el inicio de sesión, puede guardarse para un acceso rápido.

IDS NXT 2.0: inteligencia artificial para la automatización de fábricas

Esta actualización amplía las capacidades de la IA de IDS NXT incorporando el reconocimiento de objetos, la interfaz OPC UA y un nuevo entorno de desarrollo que permite programar las tareas propias de procesamiento de imágenes como apps de visión artificial y ejecutarlas directamente en la cámara.

Nuevo entorno de desarrollo para profesionales

IDS NXT Vision App Creator permite a los desarrolladores y profesionales de la IA profundizar más en el sistema, crear apps de visión artificial personalizadas y adaptar mejor las cámaras IDS NXT a sus necesidades específicas. De esta forma se puede combinar en un solo dispositivo la clasificación o el reconocimiento de objetos con tareas clásicas de procesamiento de imágenes, como la medición.

Automatización mediante OPC UA

Las cámaras IDS NXT rio y rome pueden ahora comunicarse con máquinas y controladores en el mismo lenguaje e intercambiar directamente tareas y resultados. El uso de OPC UA posibilita la integración directa de cámaras inteligentes en los sistemas de automatización de la planta de producción sin necesidad de hardware o programación extra. Además, la comunicación estandarizada sienta las bases para el "plug&produce" de nuevos equipos, lo cual reduce al mínimo el tiempo de puesta en servicio de sistemas de visión artificial.