PhD Miguel Pelaez

T&D TI

Transporte y Defensa Tecnologías de la Información

Tráfico Defensa y
Aéreo Transporte Seguridad

Proveedor líder mundial de soluciones propias en los Empresa líder en consultoría de transformación digital y
mercados de Transporte y Defensa TI en España y Latinoamérica a través de Minsait
CONTEXTO GENERAL

Extraer información útil de los datos visuales presenta

enormes oportunidades de creación de valor

60% $2,5 TRILLONES

de todos los datos generados
actualmente son de potencial impacto económico anual
que se espera sea generado por la
DATOS DE VIDEO Inteligencia visual basada en IA

Source: McKinsey Global Institute analysis

Fuente: McKinsey Global Institute analysis
PLATAFORMAS DE VIDEO ANALYTICS

Ver Entender Actuar

1 2 3
Reconocimiento Acceso interactivo a los Software inteligente
automático de personas, datos para permitir una para automatizar el
objetos y contextos mejor toma de decisiones soporte a las decisiones
Percepciones cognitivas. Conectar la inteligencia visual con la acción
Caso de uso para empresas de media:
Video Inteligencia • Enriquecimiento de video para Medios

Casos de uso para identificación: Casos de uso para transporte:

• Reconocimiento facial • Recuento y detección de vehículos
• Detección de emociones • Análisis de flujos de tráfico
• Reconocimiento múltiple de matrículas
Casos de uso para comercio:
Conteo de personas
Casos de uso para energía, industria y
construcción:
•

• Detección de grupos, aglomeraciones y colas

• Seguimiento de flujos de personas y objetos
Casos de uso de seguridad:
• Violaciones de seguridad por detección de EPIs
• Detección de anomalías en procesos de montaje
Detección de caídas
•

• Trazabilidad de productos y piezas

• Detección de movimientos anómalos
• Detección de objetos olvidados
• Detección de aberturas de puertas
• Detección de intrusiones en zonas prohibidas
OPORTUNIDAD – GESTIÓN DE PLANTAS

Digitalizar el mundo físico a partir de la

infraestructura existente de cámaras CCTV,
generando para los espacios físicos un completo
abanico de insights sobre comportamientos de
trabajadores, vehículos, maquinaria, materiales,….

Sites de contrucción

Fábricas Plantas de energía

Almacenes y centros logísticos

OPORTUNIDAD - CONSTRUCCIÓN

Captutar, interpreter y analizar secuencias de video e

imágenes y convertirlas en información procesable,
detectando riesgos y anomalías y controlando operaciones

Solución

o Asegúrese que sus instalaciones y empleados cumplen

con las normativas de seguridad y protección de
riesgos laborales

o Trazabilidad de la entrada y salida de material para

mejorar el control de costes de los proyectos

o Detección de vehículos, velocidades y trayectorias

anómalas

o Automatice las inspecciones de calidad del producto y

la fiabilidad de las inspecciones de activos

o Identificación de empleados que no cumplen con la

normativa interna de la compañía
 EJEMPLOS DE MÉTRICAS GENERADAS PARA CONSTRUCCIÓN (1)

Monitorización Tecnología Métricas/Alertas

Comportamiento de empleados

Control acceso, EPIs (casco, botas

Trabajadores heatmaps, de seguridad,
merodeo, guantes,
aglomeraciones máscaras…) y
, caídas, cumplimiento
Vehículos/ Video violencia
distancia social

máquinas Analytics

Interacción hombre / máquina

Objetos/
zonas Proximidad a
Interacciones
peligrosas con piezas giratorias,
grúas uso de
operativas maquinaria
pesada
 EJEMPLOS DE MÉTRICAS GENERADAS EN CONSTRUCCIÓN (2)

Monitorización Tecnología Métricas/Alertas

Tracking actividad Riesgos de

equipamiento
Entradas y salidas de Equipo abandonado
Trabajadores
vehículos, LPR, cerca de un borde
estacionamiento no
autorizado, Ubicación de material
conducción irregular no autorizada
Vehículos/ Video
máquinas Analytics Robo de equipo
Entradas y salidas (puerta principal o
de material valla rota)
Objetos/
zonas
Riesgos de ejecución Fuego/inundación

Control avance Detección incendios,

obra humos y fugas
(1)_ Detección de equipo de protección

o Sistema de emisión de alertas en tiempo real cuando se detecta la

ausencia de equipo reglamentario de protección
Impacto
24/7 monitorización de seguridad
Reducción de accidentes

Contexto
Entornos de construcción
Entornos de planta en operación
 (2)_Interacciones Persona – Máquina - Área

o Identificación de interacciones entre persona-máquina-área restringida para el reconocimiento de

comportamientos de riesgo o prohibidos
Viabilidad (Carretera limpia, peatones
en el camino, obstáculos por el camino)
Impacto
24/7 monitorización de la
seguridad
Reducción y prevención de
accidentes
Reducción de pérdidas maquinaria
Cumplimiento de la ley
Reducción de instrusiones
Definición de áreas fijas y dinámicas (eg. Polígonos
definiendo áreas virtuales a través de un dashboard,
Accesos abiertas/cerradas (eg. un evento es
generado cuando una puerta permanece abierta por
Contexto
distancia de seguridad a una escabadora en movimiento, encima de un tiempo definido) Entornos de construcción
…)
Entornos de planta en operación
 (2)_Interacciones Persona – Máquina - Área

o Identificación de interacciones entre persona-máquina-área restringida para el reconocimiento de

comportamientos de riesgo o prohibidos
Viabilidad (Carretera limpia, peatones
en el camino, obstáculos por el camino)
Impacto
24/7 monitorización de la
seguridad
Reducción y prevención de
accidentes
Reducción de pérdidas maquinaria
Cumplimiento de la ley
Reducción de instrusiones
Definición de áreas fijas y dinámicas (eg. Polígonos
definiendo áreas virtuales a través de un dashboard,
Accesos abiertas/cerradas (eg. un evento es
generado cuando una puerta permanece abierta por
Contexto
distancia de seguridad a una escabadora en movimiento, encima de un tiempo definido) Entornos de construcción
…)
Entornos de planta en operación
(3)_ Trabajos en ejecución

o Identificación de condiciones de trabajo arriesgadas: componentes inestables,

señalización de vehículos especiales, objetos abandonados, materiales en mal
estado, … Impacto
Disminución de accidentes
Disminución de pérdidas en
maquinaria

Grúa: detección de Contexto

elevación en ángulo Ambientes de construcción de
incorrecto plantas
Ambientes de planta operativa

Grúa: detección de
oscilaciones arriesgadas
en la carga
(4)_Humo, fuego e inundaciones

o Detección de eventos en tiempo real como humos, fuego e inundaciones

Indoor: usando el circuito cerrado de cámaras

Impacto
Reducción de accidentes por
alerta rápida
Reducción de pérdidas en
infraestructuras
Impacto mediambiental
favorable

Contexto
Outdoor: usando nuestra solución de detección de incendios Estaciones de servicio
autónoma Bosques, reservas
Poblados rurales
(5)_Detección de vertidos contaminantes

o Sistema de alertas para la toma de decisión en relación al vertido

generado por plantas eléctricas (en aire o agua)
Impacto
Agua: detección de Optimización de regímenes de
espumas y lanzamiento de trabajo
alerta para aumentar nivel Minimización de la
de antiespumante contaminación

Contexto
Plantas de generación eléctrica

Aire: detección de color

de humo para clasificar
el régimen de trabajo y
reconfigurar sistema
(6)_Monitorización de la salud de activos

o Monitorización 24/7 de tuberias, codos, sistemas electrónicos y otros activos

de una planta o de una propiedad privada

Impacto
Disminución de averías
Paradas de inspección mas
Clasificación de dispositivos rápidas
eléctricos según su modelo Aumento tiempo de vida de
infraestructuras

Contexto
Plantas de generación energética
Vivienda privada
Visión térmica de instalaciones
(7)_Medidas anti-covid

o Medición aforo, distancia entre personas, detección de aglomeraciones y personas sin mascarilla
(7)_Medidas anti-covid

o Medición aforo, distancia entre personas, detección de aglomeraciones y personas sin mascarilla
(8)_Detección de defectos en vías y monitorización perímetros de seguridad

Detección de vías y anomalías/objetos en los raíles: Fibra óptica como sistema de

objeto caído, rotura, derrumbamiento, personas, monitorización no invasivo a gran escala
animales, vehículos,...

Lectura de matrículas, identificación de las máquinas y Algoritmos para la detección de eventos y

conteo de vagones regímenes de operación

Plazas libres y estacionamiento no autorizado Sistema de envío de alarmas

Obstacle
detected

Anomalía

ID_ 001
(9)_Trazabilidad de objetos en grandes warehouses
o Trazabilidad de activos en fábrica a través de sistemas de visión
Extracción de características
que generan un identificador
único del material.
Chequeo de visión artificial en
puntos críticos
Impacto
Reducción de errores en montaje
Reducción de envíos erroneos
Contexto
Almacenes de gran escala
Inicio de procesos logísticos
Centros de distribución
EJEMPLOS
Project Scope

environment
BESÓS

Minsait ha desarrollado un sistema de

monitorización mediante visión artificial para la
central de ciclo combinado del Besós, en
España.
Dicho sistema consta de:
• Cuatro cámaras térmicas,
• Dos cámaras de espectro visible PTZ
Se monitoriza:
• La temperatura de varios puntos de cuatro
de los transformadores instalados en la
central
• El funcionamiento de dos balizas
luminosas situada varios centenares de
metros mar adentro
• La aparición de espuma, por falta de agente
antiespumante, en el río Besós.
environment
BESÓS

Monitorización térmica de 4 trafos

• Más de 30.000 mediciones al mes/cámara
• 3 umbrales de monitorización:
• Medida normal (hasta 59° o 64° según la cámara)
• Medida con alerta de prioridad media (a partir de 60° o 65° según la cámara,
hasta 74°)
• Medida con alerta de prioridad alta (a partir de 75°)
environment
BESÓS

Monitorización de generación de espuma en el

río Besós
• Uso de una red neuronal convolucional diseñada y
entrenada para el caso de uso.
• Tres iteraciones de entrenamiento, la última, realizada en
2020 para evitar falsos positivos por reflejos en momentos
puntuales a la salida del sol en los meses de verano.
• Detección del 100% de las espumas generadas tras la
última iteración, sin falsos positivos detectados a la fecha.
Imágenes Satelite
Tipos de satélites disponibles – constelación Maxar

Maxar opera la constelación de imágenes de la Tierra más sofisticada, que recoge más de tres
millones de kilómetros cuadrados de imágenes satelitales de alta resolución cada día.

Esta colección diaria se alimenta constantemente en un archivo de datos de más de 100 petabytes
que también contiene millones de kilómetros cuadrados de imágenes de satélites, creando una
máquina del tiempo digital que le permite analizar el cambio que data de hace 20 años en muy alta
resolución.

Satélites retirados Constelación de satélites actual

Monitorizacion y deteccion de incidencias

Píxel por píxel… Conjunto de

datos de
• ¿El píxel permaneció en estado estable durante tres puntos de
interés
fechas después del cambio?
¿El píxel permaneció en estado estable durante tres
fechas antes del cambio? Extracción de
Deep Learning aplicado
características
¿El píxel de las fechas posteriores al cambio es
diferente del píxel de las fechas previas al cambio?
Extracción
Conjunto de datos automatizada
de entrenamiento de
características

Validación de
Desarrollo del conjunto de características

datos de prueba
Monitoreo
automatizado
de puntos de
interés
Ejemplos de detecciones - Control de la red

Monitoreo de la zona de control de red subterránea

Monitoreo de la zona de control de red visible
Ejemplos de detecciones - Detección de incidencias
Detección de trabajos en campo
Detección de zonas quemadas

Agujero sobre la red

Ejemplos de detecciones - Detección de incidencias

Clasificación - Hormigonera vs Coche

Perforación cerca de la red
(30cm GSD)
Sistema avanzado de Monitorización

Dashboard de gestión de incidencias que permite al

usuario interactuar con las imágenes de la traza y
mostrar resultados de los análisis realizados, siendo la
pantalla principal el centro de control del sistema. En
ella, se pueden realizar las operaciones de control y
monitorización de forma sencilla y tendrá una
apariencia similar a la imagen adjunta.

Se dispone de un espacio de visualización general del

trazado de la red con los puntos donde se han
producido incidencias. Cada una de las incidencias
detectadas se identificará gráficamente con un código
de colores en función de su gravedad. Si
posteriormente se confirma que el motivo de la
incidencia ha desaparecido o se ha corregido el
problema, las incidencias se cerrarán, pasando a
estado corregido (verde) y dejarán de ser visibles.

El interface también permitirá la visualización de los

últimos valores e imágenes de las incidencias
detectadas para un rápido reconocimiento .

Se utiliza una iconografía para identificar el tipo de

elemento y algoritmo.
CARACTERÍSTICAS DE UNA SOLUCIÓN DE VISIÓN ARTIFICIAL

Atributos clave Funcionalidades adicionales

o Agnóstica desde el punto de vista del sistema de cámaras o Analytics Web Dashboard customizable
CCTV o cualquier tipo de sistema de adquisición
o API para integración en 3rd Party Systems
o Aplicación de máximos estándares de seguridad y
privacidad: no se guardan imágenes y no se generan datos o Módulo de definición de alertas por el usuario.
de carácter personal (PII) Ej: recibir una alerta por SMS si se detecta un
vehículo que ha entrado en zona prohibida
o El análisis de los streams de video y la generación de las
métricas y alertas asociadas se hacen en tiempo real

o Posibilidad de análisis forense de video-evidencias

filtrando en grabador/VMS las búsquedas por cualquiera
de las métricas/alertas/time-stamps generados

o Plataforma fácilmente escalable a nuevos casos de uso en

los ámbitos de operaciones, marketing/ventas, seguridad,
fraude y prevención
GRACIAS!

PhD Miguel Peláez

Senior Manager
Responsable de practicas en Visión Artificial
mapelaez@minsait.com
miguel@plaiground.ai