Cómo los desarrolladores, los equipos de SRE y los ingenieros de seguridad usan los datos de telemetría

En un entorno digital en rápida evolución, las organizaciones enfrentan el desafío de recopilar y procesar datos de telemetría (registros, métricas y seguimientos). A medida que aumenta el volumen de datos de telemetría, las organizaciones deben comprender cómo los utilizan varios grupos para poder optimizar las operaciones y controlar los costos.

Los desarrolladores, los ingenieros de confiabilidad del sitio (SRE) y los ingenieros de seguridad interactúan con los datos de telemetría de diferentes maneras para lograr sus objetivos. Los desarrolladores usan datos de telemetría para solucionar problemas, depurar y probar el software. Los SRE lo utilizan para garantizar el rendimiento y la estabilidad del software. Los ingenieros de seguridad lo utilizan para identificar y abordar vulnerabilidades en aplicaciones y sistemas de software.

Al comprender cómo interactúa cada grupo con los datos de telemetría, las organizaciones pueden determinar la forma más efectiva de administrarlos a escala. Las canalizaciones de observabilidad brindan una solución a este desafío de administración de datos, brindando a cada equipo la visibilidad que necesitan para mejorar sus procesos.

Administrar datos de telemetría mediante canalizaciones

Los desarrolladores, los SRE y los ingenieros de seguridad a menudo enfrentan el desafío de administrar los volúmenes crecientes de datos de telemetría y los costos de almacenamiento correspondientes. Esto se debe a la escala y variedad de las fuentes de datos, como los entornos en contenedores, lo que hace que la recopilación y el procesamiento de datos lleven mucho tiempo. Además de eso, los desarrolladores y los ingenieros de seguridad utilizan simultáneamente tres o cuatro herramientas de observabilidad para analizar datos y seis o siete SRE, lo que genera una complejidad aún mayor. (Lea también: Cómo la contenedorización puede ayudar a su empresa).

Las canalizaciones de telemetría pueden eliminar la tensión de la administración de datos al proporcionar un mayor control sobre los datos. Los equipos pueden usarlos para recopilar, transformar y dirigir datos a donde deben ir, manteniendo el contexto adecuado. Pueden usar canalizaciones para interactuar, administrar, transformar y obtener información sobre los datos en tránsito antes de que lleguen a las herramientas de observabilidad posteriores. Estas capacidades permiten a los desarrolladores, ingenieros de seguridad y SRE reducir los costos de datos, extraer más valor y pagar solo por los datos que utilizan.

Para ayudar a los desarrolladores, SRE e ingenieros de seguridad en la gestión de datos, la canalización de telemetría debe incluir los siguientes elementos:

• Recopile datos de múltiples fuentes: Los desarrolladores y los ingenieros de seguridad a menudo necesitan analizar datos en diferentes formatos de múltiples fuentes, lo que puede conducir a la recopilación y gestión manual. Las canalizaciones de telemetría que agregan datos de estas fuentes, como aplicaciones y servicios en la nube, reducen el trabajo manual y facilitan el proceso. Las canalizaciones deben admitir estándares abiertos como OpenTelemetry y formatos populares para facilitar el acceso a los datos y, por lo tanto, los cambios de configuración.
• Transformar y enrutar datos: La transformación de datos es un aspecto importante de la observabilidad que permite un fácil consumo a pesar de las diferentes fuentes y formatos. Las canalizaciones de observabilidad que pueden transformar y enrutar datos proporcionan la base para obtener información entre los equipos. Las transformaciones como el enriquecimiento y el enriquecimiento agregan valor a los datos al proporcionar contexto adicional.
• Funciones de fácil integración: Los desarrolladores, los ingenieros de seguridad y los SRE dedican importantes recursos a la integración de sus datos con proveedores específicos. De hecho, utilizan tres o cuatro plataformas de observabilidad para analizar datos y tomar decisiones. Una canalización de telemetría que se integra con las herramientas posteriores que ya utilizan reduce el esfuerzo, los recursos y la administración manual.
• Datos agregados de servicios en la nube, aplicaciones: En la mayoría de los casos, los SRE requieren soporte para fuentes como servicios en la nube, aplicaciones en la nube y firewalls para la resolución de problemas, el monitoreo del tiempo de actividad y el análisis. Una canalización de telemetría que pueda recopilar datos de estos diversos entornos de nube reducirá el esfuerzo de recopilar y preparar datos manualmente.
• Cumplimiento de datos: La presencia de datos confidenciales en los registros puede generar multas o violaciones de datos que le cuestan directamente a la organización. Las canalizaciones pueden ayudar a redactar o enmascarar datos confidenciales, cifrar PII y descifrarlos según sea necesario para garantizar el cumplimiento.

El acceso a los datos de telemetría es un factor crítico de éxito para las aplicaciones y los sistemas de software, que requiere la disponibilidad de datos entre equipos de desarrolladores, SRE e ingenieros de seguridad. Las canalizaciones permiten a las organizaciones tomar posesión de sus datos, ponerlos a disposición de diferentes equipos y evitar el bloqueo de datos en un solo sistema. A medida que aumenta el volumen de datos de telemetría, las organizaciones deben encontrar formas de procesar estos datos de manera eficiente. La tubería de telemetría proporciona una plataforma centralizada para la gestión de datos y permite que cada equipo interactúe con los datos de una manera que coincida con sus objetivos.