Impulsar el sector público mediante una gestión de datos no estructurados "sin complicaciones"

Escribe Julio Castrejón, Country Manager México en Pure Storage

El año pasado, el gobierno del Reino Unido lanzó "Transformándonos para un futuro digital", una hoja de ruta hasta 2025, con la ambición de transformar los servicios públicos a través de tecnología de clase mundial. Sin embargo, cumplir con esta hoja de ruta depende de contar con sistemas digitales rápidos y eficientes, y datos de alta calidad.

Este puede ser un ejemplo para seguir, para las organizaciones del sector público en México, que busquen alinearse con una hoja de ruta y ofrecer mejores experiencias y resultados para sus ciudadanos deben comprender la magnitud de sus datos no estructurados para aprovecharlos a través de la inteligencia artificial y el análisis, optimizar las operaciones y resolver los numerosos desafíos relacionados con la gestión de datos. Los datos no estructurados se han disparado y no se están desacelerando. Según Statista, el volumen total de datos creados, capturados, copiados y consumidos en todo el mundo para 2024 superará los 149 zettabytes cada año. Gran parte de ello no estará estructurado, lo que sabemos que tiene un valor enorme, pero también desafíos y complejidades.

Aprovechar los datos no estructurados tiene enormes implicaciones para el sector público, incluidos, entre otros, la atención sanitaria, los servicios de emergencia y la educación. El análisis eficaz de datos no estructurados puede potenciar la toma de decisiones de los funcionarios públicos al proporcionar conocimientos mejores y más rápidos y automatizar tareas repetitivas.

Sin embargo, puede ser un camino complicado llegar a este tipo de beneficios. Los datos no estructurados vienen en una amplia gama de formatos y tamaños y pueden almacenarse como archivos u objetos. A diferencia de los datos estructurados, los datos no estructurados son difíciles de organizar, categorizar y buscar debido a la variedad de formas que pueden adoptar.

Puede consistir en cualquier cosa, desde archivos de imagen y sonido hasta copias de sitios web e información de dispositivos portátiles. Dado que el volumen de datos aumenta a un ritmo sin precedentes, los desafíos no han hecho más que empeorar. Las organizaciones del sector público deben implementar tecnología escalable para aprovechar estos datos. Con necesidades de rendimiento de almacenamiento y casos de uso de IA cada vez más exigentes, el aumento de los datos no estructurados ha dado lugar a la popularidad del almacenamiento rápido y unificado de archivos y objetos.

La creciente importancia del almacenamiento rápido y unificado de archivos y objetos: reutilización de la plataforma


Un requisito clave de la hoja de ruta del Futuro Digital es “comprar una vez, usar muchas veces” y promover la tecnología de usos múltiples. Durante décadas, el almacenamiento de archivos ha sido una opción convencional e históricamente, el objeto ha sido el tipo de almacenamiento de menor rendimiento y ha formado una categoría de producto separada. Sin embargo, a medida que las organizaciones necesitan cada vez más analizar grandes cantidades de datos no estructurados que pueden estar tanto en formato de objeto como de archivo, esta visión del almacenamiento de objetos ha cambiado. Las aplicaciones actuales pueden estar escritas para admitir los protocolos de archivos del sistema de archivos de red (NFS) y del bloque de mensajes del servidor (SMB), pero cada vez más aplicaciones y casos de uso requieren soporte de almacenamiento de objetos, como Amazon S3.

Una plataforma que pueda admitir ambos métodos de acceso con alto rendimiento y escala garantiza la protección de la inversión durante y después de esta transición. Todos estos factores han llevado a la aparición de soluciones de almacenamiento de alto rendimiento que combinan el acceso a archivos y objetos. La compatibilidad con el almacenamiento de objetos también lo hace ideal para aplicaciones híbridas, ya que facilita la transición de datos no estructurados entre ubicaciones en el sitio y en la nube.

Casos de uso de datos modernos e IA


Se requiere alto rendimiento, escala y flexibilidad para desbloquear el potencial de AI/ML, así como muchos marcos de análisis modernos. Las organizaciones del sector público a menudo tienen la tarea de hacer más con menos; la automatización y las herramientas como la IA generativa tienen un enorme potencial para aumentar la eficiencia sin aumentar los costos.

Como parte de la hoja de ruta del Reino Unido, de aquí a 2025 se prestará especial atención a permitir que los departamentos hagan un uso seguro y responsable de la Inteligencia Artificial para mejorar la eficiencia y los servicios. El almacenamiento unificado de archivos y objetos totalmente flash ofrece el rendimiento y la flexibilidad necesarios para los proyectos de IA.

Garantizar que su misión de datos sea posible


Dentro del plan para el Futuro Digital hay un gran énfasis en mejorar la calidad de los datos y en hacer que todos los activos de datos “esenciales compartidos” estén disponibles y en uso en todo el gobierno a través de API y plataformas confiables cuando sea necesario.

Sin embargo, muchas organizaciones no saben cómo categorizar sus datos cruciales y no cruciales, lo que significa que se consume más espacio de almacenamiento innecesariamente. Después de todo, si no sabes qué datos conservar y qué perder, conservarlos todos es un valioso desperdicio de recursos.

Si bien los datos no estructurados son más complicados de almacenar, administrar, analizar y procesar que los datos estructurados, hoy en día existen muchas herramientas y aplicaciones (incluido un número creciente de herramientas de inteligencia artificial) para ayudar a las organizaciones a comprender y administrar sus datos no estructurados, así como a extraer el valor oculto. dentro de él, sin embargo, estas herramientas solo son efectivas cuando el acceso a los datos no está limitado por las plataformas subyacentes.

Sostenibilidad


La sostenibilidad es, con razón, una parte clave de la estrategia del Futuro Digital. Dado que se prevé que el crecimiento del volumen de datos se multiplicará por 10 para 2030, la eficiencia energética y el ciclo de vida sostenible de las plataformas de almacenamiento de datos son ahora un foco de atención para las organizaciones del sector público.

Una forma eficaz de mejorar la sostenibilidad de las organizaciones de servicios públicos digitales es utilizar soluciones de almacenamiento de datos no estructurados totalmente flash y ultradensas que no solo reduzcan el consumo de energía y la huella de carbono, sino también los desechos electrónicos al alargar su ciclo de vida y reducir la cantidad de componentes. siendo reemplazado con el tiempo.

El cielo es el límite de los "datos"


Ya sean humanos o máquinas quienes realizan la búsqueda, los datos no estructurados son ricos en patrones ocultos y conocimientos que pueden brindar a las organizaciones del sector público formas nuevas e innovadoras de tener éxito. Las aplicaciones de análisis de datos pueden analizar múltiples flujos de datos no conectados (como datos meteorológicos, redes sociales, resultados de encuestas, etc.) para encontrar nuevos patrones y correlaciones.

Al aprovechar las soluciones de infraestructura modernas adecuadas para obtener información sobre estos patrones y un almacenamiento y gestión de datos sencillos, el sector público, sin importar el país, puede cumplir con la hoja de ruta digital en un lapso de 3 a 5 años e impulsar la eficiencia, la simplicidad y el rendimiento, brindando mejores servicios y resultados para los ciudadanos.

(*) Julio César Castrejón: Country Manager para México de Pure Storage