Definición de fábrica de datos

La huella de la actividad de cualquier objeto o evento sobre el territorio se puede cuantificar y almacenar en un conjunto de datos. En la actualidad estas bases de datos espaciales son un producto, que una vez procesado, es convertido en información y conocimiento siguiendo un esquema análogo al empleado en la producción industrial de manufacturas.

La actividad de las nuevas factorías construidas entorno al dato producen un resultado distinto al de las tradicionales fábricas: un servicio de ayuda a la toma de decisiones. Pero ¿qué son esas fábricas de datos espaciales?

En esta nota analizamos la definición de fábrica de datos desde múltiples ópticas.

1. Siguiendo el rastro de la actividad de las fábricas de datos
2. Listado de definiciones de Fábricas de datos
   1. Maquinaria: hardware, software y nube
   2. Automatización del flujo de información
   3. Transferencia de conocimiento
   4. El lenguaje de los datos
   5. Aprendizaje automatizado y datos inteligentes
   6. Lugar
   7. Análisis de datos
   8. Vida útil ajustada al ciclo de vida de productos e infraestructuras
   9. Sincronización, cadencia y oportunidad
   10. Capacidad predictiva
   11. Monitorizacion en tiempo real
   12. Integración y fusión de fábricas de datos
   13. Reducción del tiempo de reacción
   14. Conectividad
   15. Crowdsourcing
   16. Seguridad jurídica
   17. Experiencia móvil y virtual del usuario
   18. Industrialización
   19. Gamificación
   20. Catálogos, metadatos y conocimiento
   21. Incertidumbre
   22. Ecosistema de la fábrica de datos y la geocomunidad
   23. Visualización de datos
   24. Atlas
   25. Narrativa
   26. Inteligencia (Smart)
   27. El doble digital: la simulación
   28. Alfabetización digital, humanismo y percepción
   29. Transformación digital
3. ¿Que necesitan las factorías de datos para funcionar?

Servicios de las factorías de datos en la nube de Google cloud y AWS

Las empresas proveedoras de la capa de infraestructura tecnológica (IT) describen la fábrica de datos en términos de tecnología. Microsoft azure plantea la definición de fábrica de datos como un medio de canalización de los datos mediante un servicio de integración de datos. McAffe describe la fábrica en términos de nube empresarial. Google Cloud o Amazon Web Services la define como una factoría con un conjunto de servicios o o funcionalidades sobre los datos.

Desde el sector de la computación en la nube IaaS – Infrastructure as a Service, los CaaS – Container as a Service, PaaS – Platform as a Service, SaaS – Software as a Service y FaaS (Functions as a Service) desgranan algunas de las operaciones o tareas que se producen en las fábricas de datos

La fábrica de datos es el entorno de trabajo y conjunto de herramientas utilizadas para crear flujos de datos.

• Es un framework donde se automatiza completamente las operaciones de recopilación, inspección, procesado y publicación de datos.
• Un entorno de trabajo destinado a crear y ejecutar flujos de trabajo de procesamiento de datos de manera rápida y sencilla.
• Una interfaz que automatiza completamente el proceso de creación, entrenamiento y desarrollo de modelos.

La factoría de datos es el medio donde sucede la innovación. Proceso de innovación en el que se produce la transferencia de conocimiento entre centros de investigación, industria, academia, administración y empresa para proporcionar un servio de apoyo a la toma de decisiones.

Plataforma abierta de analítica de datos con una completa cartera de soluciones que proporcionan analítica avanzada a todo el abanico de necesidades de la inteligencia de negocio (BI) . Lo que significa que más personas pueden descubrir más conocimientos para crear un mayor valor de negocio.

En esta definición Qlik de la fábrica de datos explora el requisito necesario para el éxito de una fabrica de datos, y de la transformación digital de una organización impulsada por datos: haber desarrollado una cultura basada en datos. Sin embargo los estudios de Qlick sobre alfabetización de datos desvelan que todavía falta mucho por avanzar en este campo. La alfabetización de los datos es un requisito previo para entender el producto que nos ofrece las fábricas de datos y dotarlo de contexto en la organización.

Talking data en O’Reilly apuntan a tres elementos clave en la era de los datos inteligentes y en la definición de fábrica de datos. Los datos, inteligencia artificial (AI) la sabiduría humana. Esos tres elementos están interrelacionados y forman un bucle virtuoso.

• La acumulación de datos permite una comprensión más profunda y ayudarnos a ganar más experiencia y sabiduría. Además, sin datos, sería imposible que existiera la AI y la acumulación de sabiduría humana también se ralentizaría.
• la AI requiere la participación humana para su entrenamiento y aumentar su eficiencia. Sin la intervención continua de la sabiduría humana, la adición de AI a los datos perderá su valor e incluso se volverá inefectiva.
• Para los humanos es un desafío trabaja con con datos complejos y rápidamente cambiantes.

La definición de la fábrica de datos desde el periodismo (NYT ) llama nuestra atención sobre el espacio físico el que se procesan manualmente grandes cantidades de datos, generalmente para el consumo mediante un modelo de inteligencia artificial

CARTO proporciona algunos ejemplos de las utilidades del análisis de datos geográficos. Algoritmos de detección de fraude para detectar anomalías en el comportamiento de los usuarios, los algoritmos para medir y predecir riesgo antes del daño, optimizando la labor de las aseguradoras, los algoritmos para optimizar tasas de alquiler y precios de venta del sector inmobiliario partir de información sobre la competitividad del mercado, los cambios en los precios de la vivienda y la accesibilidad del transporte.

La definición de la fábrica de datos a menudo incide en el proceso productivo que transforma el datos en conocimiento mediante del análisis de los datos.

Modelos y algoritmos transforman los datos «en crudo» en indicadores que permiten adoptar decisiones y evaluar su efecto en términos económico, social y ambiental

Consultoras como Deloiite plantean la factoría de datos como un conjunto de recursos de análisis de datos escalables con los estándares, las metodologías y el enfoque mediante un programa estructurado que acelera la capacidad de los recursos para entregar proyectos relacionados con datos.

CARTO plantea un flujo de trabajo en 5 pasos para convertir los datos geo-localizados en resultados comerciales.

Desde algunas ámbitos en la definición de fábrica de datos se destaca la idea del mantenimiento predictivo de activos como uno de los factores que esta impulsado la implantación del Internet de las cosas en el sector industrial.

Los sectores que inciden en el mantenimiento de activos comprenden la maquinaria industrial los electrodomésticos, las edificaciones, o las infraestructuras.

Desde el ámbito de la BIM , Boston Consulting Group nos traslada la siguiente ventaja del mantenimiento predictivo que realizan las factorías de datos. Las fábricas de datos no solo pueden reducir el tiempo de construcción y el coste del ciclo de vida completo de una infraestructura, sino que también mejoran la calidad de los procesos y la seguridad, las condiciones de trabajo y la sostenibilidad.

La información puede resultar obsoleta en un espacio muy breve de tiempo . Este es el motivo por el que el ciclo de la producción de la fábrica de datos debe estar acompasado con la toma de decisiones. La sincronización de la producción con su uso es clave para obtener beneficio de la fabrica de datos. Cadencia de producción y oportunidad de negocio deben ser sincronizadas.

Las fábricas de datos son sistemas utilizados para pronosticar resultados futuros geolocalizados y en tiempo real.

geographica destaca cuarto pasos para que las fábricas de datos alcancen la capacidad predictiva :

• Exploración de datos: es el proceso de recopilación de información útil no estructurada a partir de los datos suministrados.
• Minería de datos: es el proceso que intenta descubrir patrones en grandes volúmenes de datos.
• Análisis descriptivo: es el análisis de los datos cuyo objetivo es resumir y sistematizar los resultados.
• Análisis predictivo: es la creación de modelos de datos históricos o actuales con el fin de pronosticar resultados futuros.

La definición de fábrica de datos destaca en algunos casos sus interés como herramienta de seguimiento que determina la huella geográfica de objetos como productos e infraestructuras y eventos como riesgos naturales.

La integración de los sensores remotos (Iot) o los sensores remotos en fábricas de datos como las smart city o las smart grid , en la logística, las mercancías permite optimizar los recursos operados por administraciones, empresas, organizaciones y operadoras de infraestructuras en tiempo real, o en tiempo casi real (NRT) para fomentar la eficacia y agilidad en el proceso de tomas de decisiones.

Las fábricas de datos se integran o se fusionan. ESRI y SAP Hana combinan directamente los sistemas de recursos empresariales (ERP) con los datos procedentes de los sistemas de información geográfica (GIS)

El dato espacial deja de ser especial. Desde la perspectiva de la manufactura los datos geográficos la definición de la fábrica de datos se conciben como herramienta que forma parte de la infraestructura tecnológica. Ésta es una visión instrumental que equipara los datos espaciales con el resto de la información, perdiendo por ello su condición singular y son objeto de las mismas tareas que el resto de los datos: captura, control, calidad, análisis o comunicación. Los datos espaciales están subordinados a otros procesos como la toma de decisiones, al seguimiento de las cadenas de producción y distribución o la mejora de la gestión de proceso de negocio.

Un ejemplo podemos hallarlo en el acoplamiento de los datos geolocalizados con los sistemas de business intelligence. La integración o fusión de sistemas de información permite un retorno de la inversión (ROI) rápido impulsado por una toma de decisiones más ágil, ahorro de costos y optimización operativa, y la mejora en el rendimiento y la gestión de los activos de la organización.

Desde el ámbito de los datos climáticos y la aceleración la transición a una economía de carbono cero. EIT-Climate-Kic considera una fábrica de datos como una oferta de servicio para facilitar y acelerar la difusión de los datos a la sociedad que ayuda a reducir el tiempo de acción para la toma de decisiones

La Industria 4.0. define la fábrica de datos por la conectividad de los medios de producción de las lineas de montaje con los sistemas de inteligencia artificial.

Desde IBM Watson Iot apuntan a que las fabricas de datos son una solución que maximiza el valor de los activos conectados. La computación se ve obligada a ser más cognitiva para procesar, analizar y optimizar la información de forma adecuada, de manera que ayude a las empresas del sector industrial a extraer más valor de los datos, permitiendo que su negocio sea más cognitivo a través de un procesamiento y análisis de la información más efectivos, así como de la optimización de las operaciones.

Las definición de fábrica de datos coinciden en que etas tienen múltiples fuentes de datos que utilizan como entrada de su proceso productivo.

Entre ellas destaca la realizada por los usuarios. Este proceso ha dado lugar a un aluvión de fenómenos no exentos de polémica. Neo-geografía, voluntariado de la información geográfica (VGI) , sistema de información geográfica de participación pública(PPGIS), Gis , ciencia ciudadana, hackaton, GIS-participativo, (PGIS). GIS-colaborativo Co-PPGIS, sitos con contenido generadopor el usuario (UGC).

No se puede definir la fábrica de datos sin tener en cuenta su dimensión jurídica y legal.

Las licencias de datos, acuerdos y en definitiva la seguridad jurídica es clave en la alimentación de las lineas de producción de las fábricas de datos. Estos procesos crean una Geo-comunidad , un ecosistema de proveedores, productores y usuarios de fabricas de datos.

A su vez las fábrica de datos pueden contribuir a la seguridad jurídica, un ejemplo: la oficina virtual del catastro de España.

La interacción del usuario con la fábrica de datos es móvil, en entornos industriales, retail, turismo, medicina, logística, o eventos se produce la comunicación a través de paneles de información y control donde toda la información proveniente de múltiples sensores se presenta de manera sencilla y visual en dispositivos como los smartphone o las gafas de realidad virtual.

La definición de fábrica de datos también esta ligada al ciberespacio es la representación de los lugares físicos en Internet (GRAHAM y ZOOK, 2011). Entre el ciberespacio y el espacio real se producen relaciones. El dato espacial es la fuerza motriz que transfiere un sentido al lugar (FISHER, 2008), pero también se observa cómo los lugares se interrelacionan con el dato virtual en los digiplace (ZOOK y GRAHAM, 2007) o el placelooging (KOTTAMASU, 2007) o través de gadgets de realidad virtual.

Desde Dell EMC nos ofrecen una interesante visión de la definición de fábrica de datos como el medio de crear valor a partir de los datos a una escala industrial real mediante la automatización de las operaciones y la eliminación de desperdicio para reducir drásticamente el coste general y el tiempo empleado en la producción. El proceso de industrialización del dato es análogo al industrial y consta de tres pasos: descubrimiento, monetización, y optimización.

Play and Go mejora la experiencia de usuario y los resultados de negocio gamificando el mundo real mediante un nuevo canal de promoción y comunicación para las organizaciones, mediante su fábrica de datos obtiene información geolocalizada para el diseño de estrategias hipersegmentadas de geomarketing y/o de planificación de políticas públicas

La gamificación o ludificación traslada estrategias y mecánicas de los juegos al ámbito educativo, profesional, de la comunicacióne incluso la gamificación de las noticas.

Los sistemas gamificados no solo provocan cambios de hábitos también son una fábrica de datos

Las actividad de la fábrica de datos genera a su vez información. Esa información no solo describe comos se esta usado la factoría o cual su estado operacional, también produce un sotck de información.

La explotación de ese stock es la llave de la implantación del ciclo de Deaming en las fabricas de datos. La explotación del stock de información no sólo ofrece las posibilitad de la mejora continua o la puesta en funcionamiento de los principios de calidad total, va más allá, facilita la generación de conocimiento a la organización.

Un ejemplo son las funciones de hallazgo o visión (insight) que la que disponen muchos sistemas de Bi, y repositorios documentales.

Otro ejemplo podemos hallarlo en las infraestructuras de datos espaciales (SDI). Estos sistemas cuentan con catálogos que explotan los metadatos para ofrecer la posibilidad de su reutilización, acceso y un puente al desarrollo de datos enriquecidos para la web semántica geoespacial

Todo datos tiene su error, todo modelo lo propaga y toda decisión admite una tolerencia.

@orbemapa

En las fabricas de datos conocer ambos parámetros error y tolerancia es básico para una gestión optimizada de una factoría de información.

El análisis de incertidumbre, el análisis de la sensibilidades de los modelos que forman parte de la fábrica de datos son dos de las herramientas más utilizadas en la gestión con datos .

Para afrontar la variabilidad del entorno La simulación con escenarios es aprte de las herraietnas usadas enlas fa´bricas de datos.

Cuando disponemos de muchos modelos se recurre a métodos de precisón por conjuntos ( Ensamble)

Determinar la tolerancia de la decisión no es una tarea sencilla. En ocasiones esta determinada por la gestión del activo que opera la fábrica de datos, en otras momentos depende de un análisis económico de coste beneficio

El concepto de ecosistema está integrado en alguna definición de fábrica de datos. No sólo estamos asistiendo a la colaboración entre productores de datos, también están creando geocomunidades y acuerdos a partir de los grupos de interés relacionados con la temática de las fábricas de datos.

Desde la perspectiva de McKinsey’s un ecosistema es un conjunto interconectado
de servicios que permiten a los usuarios satisfacer una variedad de necesidades
en una experiencia integrada. Tiene tres caracteristicas:

• Los ecosistemas actúan como puertas de enlace
• Los ecosistemas utilizan efectos de red
• Los ecosistemas integran datos que ayudan a las empresas a crear productos y servicios de valor agregado, y experiencias superiores, para sus clientes.

para el sector minorista Qlik ofrece dashboard para el análisis de la cesta de la compra con el fin de crear una selección de productos adaptada, realizar ventas cruzadas y adicionales a los clientes y evitar la pérdida de ventas debida a la falta de existencias

Tableau ofrece balanced scorecard  que combinan los KPI en una única vista, permitiendo la admistración geográfica individual o de área

En la definición de fábrica de datos es habitual encontrar referencias a la visualización de datos. Visualización que se utiliza habitualmente para ofrecer el resultado final de la fábrica de datos. Para la gran mayoría de consumidores es el punto o portal de acceso a los productos y servicios que elaboran las fabricas de datos.

Algunas de las principales formas en las que se está integrando la visualización de datos son los paneles y cuadros de mando, las soluciones de web mapping, las infografías interactivas o los atlas. En todos ellos se está trabajando en lograr un diseño eficaz y un cierto grado de interacción, comunicación, y conversación con el usuario y entre diseñadores de #dataviz. Estas características son algunas de las claves de los sistemas de visualización de datos de las factorías.

Las plataformas de inteligencia de negocio (busssines intelligent) de datos como Qlik, Tableau, Power BI, salesforce, Thoughtspot, sisense, SAP están explorando y perfeccionado la visualización de los datos.

El Panel de control (Dashboard) es una interfaz visual que resume datos en métricas y gráficos para informa al usuario, en tiempo cercano al real (NRT), sobre cual es el estado de fruncimiento actual de un proceso. El cuadro de mandos integral (Balanced scorecad es una interfaz visual que resume el estado actual de los indicadores clave de rendimiento, o desempeño (KPI) , esta vinculado al plan estratégico de la organización expresado en sus metas , objetivos. La actualización es periódica (mensual). Ambos pueden ser usados también para hacer un seguimiento del funcionamiento de la propia fábrica de datos (dashboard) o de sus objetivos (Balanced scorecard)

Desde Esri, Jack Dangermond manifestaba que el mapa se esta convirtiendo en un lenguaje común entre organizaciones. Cada vez es más frecuente que nos encontremos con mapas incrustados en paneles de control y cuadros de mando. El mapa y la cartografía en Internet (web mapping ) explotan La función exploratoria de la cartografía para ofrece un nivel mayor de interacción al usuario.

Las infografías han experimentado un importante auge. La sobrecarga de información es resumida visualmente de forma atractiva, accesible y persuasiva a los ojos de nuestro cerebro. Las Infografías han evolucionando. La imagen estática ha dado paso a infografías web con contenidos multimedia interactivos y se han consolidado como un canal eficaz y eficiente de comunicación de datos.

.

Los atlas no han muerto. Los atlas se están revitalizando como imprescindibles y potentes fábricas de datos que tiene mucho que enseñar por su experiencia en sintetizar y narrar información geográfica.

Los atlas están evolucionando de libros a sistemas de información estadística, incorporando multimedia, infografías, web mapping, y facilitando conjuntos de datos espaciales para su reutilización.

Las definiciones de fábricas de datos destacan que los datos encierran historias, y las historias nos gustan. El género narrativo es un medio de éxito para conseguir la implicación de usuarios y directivos mas allá de la frialdad de un cuadro de mandos lleno de números . por este motivo las fábricas de datos comienzan a incorporar widgets que dan contexto al datos

Los datos también contiene crónicas y noticias. El Periodismo con datos, story maps, infografías exploraran la narrativa con datos. Algunos ejemplos los podemos hallar en los medios de comunicación, con temas tan dispares como la VProtección de la vacunación colectiva, refugiados, la deuda de la eurozona, la automatización del trabajo, el voto en España, la brecha salarial entre hombre y mujeres, las canciones más famosas de todos los tiempos

El periodismo de datos no es una cuestión exclusivamente tecnológica, ni trata sobre la interacción con los datos, o lograr la conversación con el lector y su fidelización con elmedio. El periodismo de datos nos esta mostrando una valiosa lección. La búsqueda de respuestas, consigue el despertar la curiosidad del lector, una curiosidad en las que destaca el interés por los datos locales,

datos enriquecidos web semántica geoespacial

Una fábrica de datos ofrece un resultado final, una toma de decisiones. La automatización y la implantación de algoritmos de IA facilita el proceso de toma de decisiones y dotar de inteligencia a los datos.

Las fábricas de datos mejoran la calidad de vida de los ciudadanos, aportándoles información en tiempo real sobre aspectos de interés general como el tráfico, la calidad del aire, sobre gestión de residuos.

La inteligencia se liga a sostenibildiad, calidad de vida, objetivos del milenio, rendimiento económico. Se aplica lo smart a la gestión de ciudades, universidades, aeropuertos, edificios, bosques, puertos o electricidad o agua. Cualquier clase de activo cae en la esfera de los «smart» incluso la producción de mapas.

Siemens y Bentley Systems han desarrollado la solución del doble digital de PlantSight

Prototipar y aplicar la teoría de modelos no son tareas nuevas para la ingeniería. En la era digital la herramienta por excelencia para realiza esta labores de diseño es la realización de simulaciones sobre modelos virtuales.

Las simulaciones digitales, también denominada por la industria 4.0 .»el doble digital» o «el gemelo digital» permite mostrar el comportamiento de un sistema frente la variabilidad de variables de entrada o el cambio en el dimensionamiento del sistema.

El análisis crítico del discurso de las smart cities no se ha hecho esperar. Eficacia, facilidad, neutralidad, deseabilidad son algunos de los tópicos hallados, los cuales pueden servir de introducción al discurso sobre las fábricas de datos o de prácticamente cualquier tecnología. Pero más allá de estos análisis descriptivos en ocasiones las implantación de las fábricas de datos falla.

Qlik plantea interesantes cuestiones sobre la cultura de los datos y la necesidad de una alfabetización del uso delos datos

Gerson Beltrán nos ofrece una respuesta en en su conferencia sobre datos geo-localizados en las smart cities. No podemos usar viejos mapas para explorar un nuevo mundo, en el cual mapas y datos son la nueva moneda de cambio. El elemento humano es clave en un mundo tecnificado: frente al algoritmo humanismo.

Otra repuesta nos la proporciona Tricia wang en su conferencia TED Las percepciones humanas que faltan en los grandes datos |

Las fábricas de datos son un elemento clave para conseguir la transformación digital.

La transformación digital está en constante redefinción y también es objeto de la agenda mediática., aL igual que le ocurre la definición de fábrica de datos.

Gran parte de las definiciones de transformación digital apuntan a que no es una cuestión de adopción tecnológica.

La ley de martec señala que la tecnología cambia exponencialmente, mientras que las organizaciones cambian logarítmicamente. Sin embargo la inversión en tecnología no es sinónimo de transforamción digital.

Robert Solow planteo la siguiente paradoja de la complejidad. El crecimiento de la productividad en general no ha seguido el ritmo del crecimiento del gasto en TI. Esto, a pesar del hecho de que el progreso tecnológico se ha mostrado como un impulsor clave del crecimiento de la productividad.

BCG apunta a que las áreas que implicaran una mayor adaptación como consecuencia de la transformación digital son:: Digitalizar las relaciones con los clientes, construir el talento digital y la organización, aprovechar los datos y la tecnología, digitalización y automatización de procesos. Estas transformaciones pueden significar el final de la paradoja de la complejidad