Supervisión de la experiencia de red

Información general

El servicioNetwork Experience Monitoring (NEM) (anteriormente denominado Netscope) permite a los proveedores de servicios, empresas, ISP y proveedores de servicios externos acceder a registros detallados de mediciones de Radar e informes estándar en forma de datos procesables resumidos. NEM ofrece varios registros e informes estándar que los clientes pueden utilizar para medir la calidad de sus servicios.

Esta solución incluye la entrega de mediciones de radar “sin procesar” y el acceso a la API de datos de ITM. NEM proporciona tanto los datos granulares (como mediciones brutas o agregados de datos) como las alertas de umbral de datos. Estos servicios ayudan con el descubrimiento, aíslan la disponibilidad de la plataforma y los problemas de rendimiento en los pares de plataforma y los ISP subyacentes.

Mediciones “brutas”de radar: las mediciones de radar proporcionan información granular por evento que se procesa en lotes a diario. Las mediciones de radar incluyen datos de medición públicos, comunitarios y privados recopilados por la etiqueta. Se incluyen datos como la disponibilidad, el tiempo de respuesta y el rendimiento de las mediciones HTTP y HTTPS. Se proporcionan los siguientes campos de datos:

• ID de proveedor, IP de resolución, IP de cliente ofuscadas (/28)
• Encabezado de referencia ofuscado, agente de usuario, ASN de usuario final
• Datos geográficos para campos de resolución y cliente

Las métricas de radar que están disponibles en las medidas “RAW” son:

• Disponibilidad, tiempo de respuesta y rendimiento (cuando se mide)
• Hora de búsqueda de DNS (opcional), hora de conexión TCP (opcional) y hora de conexión segura (opcional)
• Latencia (opcional)
• Tiempo de descarga (opcional)

Las mediciones de radar están disponibles para permitir a los clientes realizar sus propios análisis de los datos recopilados. El conjunto de datos incluye información sobre el rendimiento y la disponibilidad del proveedor (errores) para una serie de protocolos de comunicación.

Los datos de los archivos de registro están disponibles durante 7 días, desde un depósito de AWS S3 o Google Cloud Storage. Los clientes pueden recuperar archivos de registro de datos comunitarios y privados mediante métodos de acceso a depósitos estándar.

Medidas “RAW” de radar en tiempo real (opcional): Las mediciones Raw Radar se entregan en tiempo real a un bucket de AWS S3. Por lo general, estos registros están disponibles dentro de los 5 minutos posteriores a la recopilación Proporcionan tanta granularidad como las mediciones sin procesar de radar señaladas anteriormente.

API de datos: La API de datos de ITM Radar proporciona agregados de datos de medición privados y de la comunidad pública de Radar. Los datos se actualizan continuamente y se almacenan por lotes aproximadamente cada 60 segundos para que la API los recupere. La API de datos se proporciona para permitir a los clientes integrar datos de Radar en sus propios informes y paneles.

Uso compartido y entrega de registros

• Los registros de Radar se pueden entregar en tiempo real y diariamente.
• Los informes se publican diariamente.
• Los resultados se guardan en AWS S3 (S3) o Google Cloud Storage (GCS).
• Tanto los registros como los informes tienen un período de retención de 7 días y se eliminan automáticamente una semana después de su creación.
• Los informes suelen estar en formato TSV (valores separados por tabulaciones) o JSON, según el tipo de informe.

Los clientes reciben información de inicio de sesión para acceder a los depósitos de S3 y GCS. Se puede usar una herramienta de línea de comandos como s3cmd o la CLI de AWS para S3 o gsutil para GCS para iniciar sesión. El archivo de configuración de S3cmd reconoce las claves de acceso recibidas a través de la interfaz de usuario del portal y ayuda al usuario a conectarse al bucket de S3.

La CLI de AWS debe instalarse en el equipo del cliente para conectarse a S3 y acceder a los registros. Para GCS, el cliente recibe el archivo de clave de acceso como una descarga a través de la interfaz de usuario del portal, que se puede usar con la herramienta gsutil. Para obtener más información, consulte las preguntas frecuentes.

Los clientes reciben notificaciones por correo electrónico cuando los informes están disponibles.

Configuración de la plataforma

Debe configurar su plataforma para admitir y producir los datos necesarios para Netscope NEM. Antes de empezar, asegúrese de que la siguiente configuración esté habilitada para su plataforma:

• Para Detalles de sincronización de recursos, habilite Incluir marcas de tiempo en Configuración avanzada de Radar.

Navegación

En el menú principal, seleccione Netscope NEM. Se abre la página Network Experience Monitoring Configuration.

Plataformas

Seleccione las plataformas necesarias para iniciar el proceso de configuración.

NOTA:

Los registros e informes solo se pueden configurar y generar si se selecciona al menos una plataforma o red.

Los datos resumidos que recibe el cliente incluyen mediciones de Radar de plataformas seleccionadas (para todas las redes asociadas).

Selección de plataformas

Para empresas o proveedores de servicios de contenido, seleccione plataformas como CDN, nubes, centros de datos u otros puntos finales. Seleccione las plataformas para las que se requieren mediciones.

Registros de Radar

• Los registros de Radar están disponibles para las plataformas.
• Incluyen un subconjunto de los campos disponibles en los registros sin procesar, con algunos datos anonimizados: IP cliente /28, Referer MD5 hash.
• Se proporcionan todas las medidas tomadas para plataformas públicas, independientemente de la página que generó la medición.

NOTA:

NEM nunca expone las IP de cliente completas. En su lugar, expone el /28. Por ejemplo, una IP de 255.255.255.255 se muestra en un informe como 255.255.255.240/28.

Frecuencia de registro

Los registros de Radar se pueden generar diariamente (cada 24 horas) es decir, final del día, hora UTC. Los registros también se pueden generar en tiempo real (minuto a minuto).

Formato de archivo

Elija TSV o JSON para recibir registros e informes en cualquiera de estos formatos.

Tipo de medición

Puede configurar registros para los siguientes tipos de medida: Disponibilidad, Tiempo de Respuesta y Rendimiento. En el informe, 1: Disponibilidad, 0: Tiempo de respuesta HTTP y 14: Rendimiento HTTP.

Detalles de temporización de recursos

Puede optar por incluir también detalles de temporización de recursos haciendo clic en los botones Sí o No. Los detalles de temporización de recursos incluyen:

• Hora de búsqueda de DNS
• Hora de conexión TCP
• Tiempo de conexión seguro
• Tiempo de descarga

Para obtener las descripciones de los registros, consulte Descripciones e informes de registros de radar para proveedores de servicios y empresas.

Registros de sincronización de navegación

Frecuencia de registro

Los registros de sincronización de navegación se pueden generar diariamente (cada 24 horas) es decir, final del día, hora UTC. Los registros también se pueden generar en tiempo real (minuto a minuto).

Formato de archivo

Elija TSV o JSON para recibir registros de sincronización de navegación en cualquiera de estos formatos. Para obtener las descripciones de los registros, consulte Descripciones del registro de sincronización

Registros de Openmix

Frecuencia de registro

Los registros de Openmix se generan en tiempo real (es decir, minuto a minuto). Estos registros proporcionan mediciones en tiempo real tomadas para los clientes de Openmix.

Formato de archivo

Elija TSV o JSON para recibir registros Openmix y HTTP Openmix en cualquiera de estos formatos. JSON es sin embargo el formato recomendado.

Para ver las descripciones de los registros, consulte Descripciones de los registrosde

Entrega de servicios en la nube

Esta opción le permite seleccionar el modo de entrega. Puede optar por recibir registros e informes en el depósito de AWS S3 o en el depósito de Google Cloud Storage (GCS). Puede acceder a los depósitos de S3 y GCS con la información de inicio de sesión proporcionada y usar s3cmd o la CLI de AWS para S3 y la línea de comandos de gsutil para GCS.

AWS S3

Para los registros e informes que se entregarán al depósito de AWS S3, seleccione AWS S3.

Ubicación

La ubicación representa el depósito en AWS S3 donde se guardan los registros y los informes.

Claves de IAM

Si selecciona el botón Generar claves en AWS S3, las claves de IAM de AWS (claves de acceso y secretas) se generan y se muestran en Claves de IAM. Asegúrese de grabar las claves porque no están guardadas en ningún lugar para verlas más tarde.

NOTA:

El par de claves de acceso y secreto son la única copia de las claves privadas. El cliente debe almacenarlos de forma segura. La regeneración de las nuevas claves invalida las existentes. El archivo de configuración S3cmd reconoce las claves de acceso (recibidas a través de la interfaz de usuario del portal) y ayuda al cliente a conectarse al depósito S3. La CLI de AWS debe instalarse en la máquina del cliente para conectarse a S3.

Para obtener información sobre cómo usar las claves de acceso y secretas con s3cmd para descargar informes del bucket de S3, consulte las preguntas frecuentes.

Almacenamiento en la nube de Google

Para que los registros e informes se entreguen a GCS, selecciona Google Cloud Storage.

Ubicación

La ubicación representa el depósito en Google Cloud Storage donde se guardan los registros y los informes.

Claves de IAM

Al seleccionar el botón Generar archivo de clave, el archivo de clave de cuenta de Google Service se descarga en el equipo.

NOTA:

Este archivo de clave sirve como única copia de la clave privada. Tome nota de la dirección de correo electrónico de su cuenta de servicio y almacene de forma segura el archivo de clave privada de la cuenta de servicio. La regeneración de un nuevo archivo de clave invalida el archivo existente.

Este archivo clave se puede utilizar con la herramienta gsutil para descargar registros e informes desde el depósito GCS. Para obtener más información sobre cómo usar el archivo de claves para descargar archivos de registro, consulte las preguntas frecuentes.

Descripciones e informes del registro de Radar para proveedores de servicios y empresas

Registros de Radar para proveedores

• Estos registros proporcionan mediciones de Radar para socios de referencia.
• Proporcionan todas las medidas tomadas para plataformas públicas, independientemente de la página que generó la medición.
• Los registros de Radar incluyen un subconjunto de los campos disponibles en los registros sin procesar, con algunos datos anonimizados: IP cliente /28, Referer MD5 hash.
• Este es un ejemplo de uso compartido de registro de radar de plataforma en formato de archivo TSV.

NOTA:

• NEM nunca expone las IP de cliente completas. En su lugar, expone el /28. Por ejemplo, una IP de 255.255.255.255 se muestra en un informe como 255.255.255.240/28.
• La información GEO del cliente se extrae en función de la IPv4 del cliente, que es más detallada.

Descripciones de registro

Los siguientes son los encabezados de las columnas y las descripciones de los registros de radar. Los campos aparecen en el siguiente orden en los archivos de salida:

Descripciones del registro de temporización de navegación

Datos de sincronización de navegación

Los datos de sincronización de navegación proporcionan información sobre las diversas partes del proceso de carga de páginas para una página web.

Estos datos varían según la ubicación del usuario final, los problemas de red, los cambios realizados por el proveedor, etc. Los clientes pueden usar los datos de navigation Timing para optimizar la experiencia del usuario final al cargar la página web supervisada.

Se pueden realizar mediciones para cada sesión de Radar (si está activada). Cada sesión se adjunta a un número de ID que ayuda a realizar un seguimiento de todas las mediciones de una sesión. Estas mediciones se comparten con los clientes como Registros de sincronización de navegación a través de NEM.

El siguiente es un ejemplo de los datos de temporización de navegación en formato de archivo TSV.

Los siguientes son los encabezados de las columnas y las descripciones de los registros de sincronización de navegación. Los campos aparecen en el siguiente orden en los archivos de salida:

Registros Openmix y HTTP Openmix

Los registros Openmix y HTTP Openmix permiten a los clientes utilizar mediciones en tiempo real para supervisar el comportamiento de sus aplicaciones Openmix. Pueden usar estos datos para encontrar áreas de mejora o para verificar el rendimiento esperado de sus aplicaciones.

• Estos registros proporcionan mediciones en tiempo real tomadas para los clientes de Openmix.
• El formato de archivo recomendado para estos registros es JSON, pero también están disponibles en formato TSV.
• A continuación se muestran ejemplos de datos de uso compartido de registros Openmixy HTTP Openmix en formato de archivo TSV.

Descripciones del registro de Openmix

Descripciones del registro de API HTTP de Openmix

Informes personalizados para organizaciones de terceros

Los clientes pueden trabajar con NetScaler para obtener informes personalizados basados en los datos de Radar que recopila NetScaler. NetScaler puede generar informes para ejecutarlos según un cronograma. Los informes están disponibles como archivos de datos, normalmente en formato TSV.

Preguntas frecuentes

Radar

¿Con qué frecuencia se envían archivos a S3 y GCS?

La frecuencia de los depósitos de archivos es una vez por minuto para Radar y diariamente para los informes.

¿Dónde se almacenan los informes?

S3 Legado (Ubicación 1):

s3://public-radar/[customer name]/

S3 (Ubicación 2):

s3://cedexis-netscope/[customer id]/

GCS (Ubicación 3):

gs://cedexis-netscope-[customer id]/

¿Cómo obtener las credenciales de acceso a S3 si aún no las tiene?

El portal proporciona una clave de “Acceso” y “Secreta”. Utilice las claves con ‘s3cmd’, ‘awscli’ u otras herramientas para acceder a S3. Para Google Storage, el Portal descarga un archivo con credenciales de acceso para usarlo con la herramienta “gsutil”.

¿Cómo usar las claves de acceso y secretas con s3cmd para descargar registros e informes del depósito S3?

En primer lugar, tendría que descargar e instalar els3cmd desdehttps://s3tools.org/download, y consultar elhttps://s3tools.org/usage uso, las opciones y los comandos. A continuación, ejecute el siguiente comando:

s3cmd --access_key=[access key] --secret_key=[secret key] ls s3://cedexis-netscope/<customer id>/radar/
<!--NeedCopy-->

Para descargar los archivos, ejecute el siguiente comando:

s3cmd --access_key=[access_key] --secret_key=[secret_key] get s3://cedexis-netscope/<customer id>/radar/[the_filename_to_download] [the_name_of_the_local_file]
<!--NeedCopy-->

Cómo usar la configuración s3cmd para enumerar archivos en el depósito S3

El primer paso es instalars3cmd. Puede instalarlo desdehttp://s3tools.org/download

Para configurar s3cmd, ejecute el siguiente comando

s3cmd ls s3://cedexis-netscope/[customer id]/
<!--NeedCopy-->

Si ya está utilizandos3cmd con otro conjunto de claves de acceso y secretas, siga estos pasos:

Si ya usa s3cmd, haga una copia de la configuración predeterminada, en ~/.s3cfg. Por ejemplo, haga una copia y asígnele el nombre ~/.s3cfg_netscope. Reemplace las entradas de clave secreta y de acceso en ~/.s3cfg_netscope por las que proporcionamos. Utilice la nueva configuración en lugar de la predeterminada (la de su empresa) para acceder al depósito S3 con el siguiente comando:

s3cmd -c ~/.s3cfg_netscope ls s3://cedexis-netscope/[customer id]/
<!--NeedCopy-->

La principal diferencia es que hay que poner -c y dónde se encuentra el archivo de configuración con las claves de acceso y secretas proporcionadas por NetScaler.

Si quiere cambiar entre juegos de claves, insértelos en un archivo. Consulte el archivo con la opción -c para especificar qué par de claves está utilizando.

NOTA: -c El parámetro indica dónde se encuentra el archivo de configuración, que contiene las claves de acceso y secreto.

Cómo usar el archivo clave con gsutil o gcloud para descargar archivos de registro

Una vez descargado el archivo de clave JSON de la cuenta de servicio de Google, puede usarlo para autenticar las credenciales de su cuenta de Google, ver o descargar sus archivos de registro. Por ejemplo, esta es una forma de hacerlo con las utilidades de línea de comandos gcloud y gsutil de Google:

Paso 1: Activar el archivo de claves

Los comandos de autenticacióngcloud auth activate- ogsutil config -e son necesarios para autenticar el archivo de claves para ejecutar comandos gcloud o gsutil.

Para gcloud:

Ejecute el siguiente comando con el archivo de claves descargado:

gcloud auth activate-service-account --key-file [downloaded config file]
<!--NeedCopy-->

O bien,

gcloud auth activate-service-account --key-file=[path and file name of key file]
<!--NeedCopy-->

Para gsutil:

Ejecute el siguiente comando con el archivo de configuración descargado:

gsutil config -e
<!--NeedCopy-->

Paso 2: Liste los archivos en el depósito GCS (Google Cloud Storage)

Una vez que haya activado el archivo de clave de la cuenta de servicio como se describe en el paso anterior, use este comando para enumerar los archivos en el depósito de GCS:

gsutil ls gs://cedexis-netscope-<customer id>
<!--NeedCopy-->

Paso 3 (si es necesario): Restaurar credenciales originales (o cambiar entre cuentas)

Puede cambiar entre la cuenta ITM de NetScaler y otras credenciales de Google Cloud que haya autenticado de la siguiente manera.

Primero, ejecute el siguiente comando para enumerar todas sus cuentas:

gcloud auth list
<!--NeedCopy-->

A continuación, utilice el siguiente comando para cambiar a otra cuenta:

gcloud config set account [email of the account to switch to as shown in gcloud auth list]
<!--NeedCopy-->

Puede cambiar de una cuenta a otra mediante el mismo comando, reemplazando el correo electrónico por el correo electrónico de la cuenta al que quiere cambiar.

¿Cómo es el nombre del archivo?

Legacy Daily:

Los nombres de ShareFile del registro diario de Radar tienen esta estructura:

<prefix><date: YYYY-MM-DD>.<customer_id>.part<uniq_id>.kr.txt.gz

Por ejemploCedexis_Daily-2017-11-07.21222.part-cc901e1dd55eal4e.kr.txt.gz (ejemplo no estándar)

Legado en tiempo real:

Los nombres de ShareFile de registro en tiempo real de Radar tienen esta estructura:

<prefix><customer_id>-YYYY-MM-DDTHH:MM<uniq_id>.txt.gz

Por ejemplo:Cedexis_3-32291-2017-11-08T20:56-cc907e8fd71eaf4e.txt.gz

Formato NEM Netscope:

El formato NEM Netscope para archivos compartidos de registro diario y en tiempo real tiene esta estructura:

<freq><log_type><prefix><id_type><id><iso_dt><uniq_id>.<line_format>.gz

Donde:

• freq: "daily" | "rt" | "hr"
• log_type: "radar" | "opx" | "hopx"
• prefix: log_share.prefix
• id_type: "customer" | "provider" | "asn"
• id: log_share.match_id
• iso_dt: iso 8601 Date_time "YYYYMMDDTHHMMSSZ"
• uniq_id: hash(UUID)
• line_format: "tsv" | "json"

Por ejemplo:rt-radar-TestRadar1-provider-20363-20171209183034Z-cc907e8fd71eaf4e.tsv.gz

¿Cuál es el formato del archivo de salida?

Para Radar, el formato de archivo de salida es TSV (valor separado por tabulaciones), gzip.

API HTTP Openmix y Openmix

¿Con qué frecuencia se envían archivos a S3?

La frecuencia de los depósitos de archivos es una vez por minuto para Openmix y HTTP Openmix.

¿Qué pasa si no puede ver la opción para configurar el uso compartido de registros en tiempo real de las API HTTP de Openmix y Openmix?

Su administrador de cuentas puede habilitar la función necesaria para configurar y habilitar el uso compartido de registros en tiempo real de la API HTTP de Openmix y Openmix.

¿Cómo se activa Openmix y una API HTTP de Openmix para compartir registros en tiempo real y acceder a los archivos?

Cuando la función esté habilitada en su cuenta, verá el icono Administrar registros. Haga clic para abrir el cuadro de diálogo Registros donde puede acceder a la configuración de Openmix Log Configuration. Estas configuraciones son básicamente todo lo que necesita para activar Openmix y HTTP Openmix en tiempo real para compartir registros y acceder a los archivos.

¿Cuál es el proceso back-end?

Al activar el uso compartido de registros de Openmix, también se habilita el uso compartido de registros de la API HTTP de Openmix. Los servicios de uso compartido de registros de API HTTP Openmix y Openmix deben comenzar a generar registros para el cliente en 10 minutos.

¿Dónde se almacenan los informes Openmix y HTTP Openmix?

S3 Legado (Ubicación 1):

s3://logshare/[zone ID]/[customer ID]/logs/openmix/json/[YYYY]/[MM]/[DD]/[HH]/.

S3 (Ubicación 2):

s3://cedexis-netscope/[customer id]/

GCS (Ubicación 3):

gs://cedexis-netscope-[customer id]/

¿Cómo es el nombre del archivo?

La estructura de nombres de archivo para Openmix y HTTP Openmix normalmente se ve así:

Legado en tiempo real:

[zone ID, 1][customerID]-openmix-json[YYYY][MM][DD][HH][mm][ss]Z-m1-w9-c0.gz

Formato NEM Netscope:

El formato NEM Netscope para archivos compartidos de registro diario y en tiempo real tiene esta estructura:

<freq><log_type><prefix><id_type><id><iso_dt><uniq_id>.<line_format>.gz

Donde:

• freq: "daily" | "rt" | "hr"
• log_type: "radar" | "opx" | "hopx"
• prefix: log_share.prefix
• id_type: "customer" | "provider" | "asn"
• idv: log_share.match_id
• iso_dt: iso 8601 Date_time "YYYYMMDDTHHMMSSZ"
• uniq_id: hash(UUID)
• line_format: "tsv" | "json"

Por ejemplo:hr-opx-TestOpenmix1-provider-20363-20171209183034Z-cc907e8fd71eaf4e.tsv.gz

¿Cuál es el formato de archivo de salida?

El formato de archivo para Openmix y una API HTTP de Openmix es JSON (comprimido con gzip).