Reúna los datos que necesita, justo donde los necesita

En una época de infinidad de datos, es fundamental recopilarlos de forma más inteligente.

Como experto y profesional de la analítica, sé de primera mano que recopilar datos a través de múltiples activos y canales digitales puede ser desalentador. Este es especialmente el caso cuando el número de dispositivos conectados a Internet supera los 21.000 millones en 2023. Afortunadamente, nuestro actual sistema de direccionamiento de Internet puede gestionar muchos de estos dispositivos, concretamente hasta 3,4×10E38 (es decir, 34 seguidos de 37 ceros).

De estos 21.000 millones de dispositivos, alrededor del 66% está formado por dispositivos de Internet de las Cosas (IoT), todos los cuales generan datos sobre su funcionamiento, características y configuración. Llámenlo cajas negras conectadas o telemetría con esteroides, pero estos dispositivos envían datos a los proveedores de servicios que los utilizan para mejorar sus productos.

Tal escala de recopilación de datos no sólo proporciona el combustible ideal para la IA y el aprendizaje automático, sino también los medios para establecer líneas de base de rendimiento y valores atípicos. De un pozo de información tan insondable se pueden extraer modelos de uso de funciones, ideas y planes de acción.

(Re)introducir el Measurement Protocol (protocolo de medición).

¿Cómo miden la actividad estos dispositivos? Este post es una excusa perfecta para analizar el protocolo de Measurement Protocol de Google Analytics 4 como método alternativo de recopilación de datos que puede ayudarle a medir todos los datos de IoT que necesita y hacerlos compatibles con el modelo de datos planos que ha adoptado y que tanto le gusta. El Measurement Protocol se introdujo a principios de la década de 2010 con la versión anterior de Google Analytics, la ya desaparecida Universal Analytics. En aquella época, el Measurement Protocol se utilizaba de formas muy creativas, por lo que su renacimiento en GA4 es una gran oportunidad para (re)descubrir esta función menos conocida pero potente de Google Analytics.

En esencia, el Measurement Protocol es una API que permite enviar eventos directamente a los servidores de Google Analytics, evitando la necesidad de voluminosos kits de desarrollo de software y complejas integraciones. La mínima huella de software del Measurement Protocol significa que es fácilmente integrable en cualquier sistema que pueda llamar a una URL. Como puede imaginar, esto se puede utilizar para todo tipo de IoT, desde quioscos hasta puntos de venta y dispositivos IoT. Algunas ventajas claras son

• Protocolo estándar, por lo que es compatible con una amplia gama de dispositivos y plataformas
• Fácil de usar, incluso para desarrolladores con poca experiencia
• Escalable, por lo que puede utilizarse para recopilar datos de un gran número de usuarios
• Seguridad, mediante el uso de claves secretas para la recogida de datos

Gracias a su enfoque ligero, el Measurement Protocol permite recopilar sólo los datos necesarios. La falta de un mecanismo de consentimiento explícito del usuario en la mayoría de los dispositivos IoT le animará a adoptar un enfoque que dé prioridad a la privacidad, por lo que deberá centrarse en la telemetría y no en los datos personales.

Descubrir el funcionamiento interno del Measurement Protocol.

¿Cómo funciona todo esto? Bien, al crear una propiedad de Google Analytics 4 (GA4) para su proyecto IoT, primero debe crear una nueva propiedad web y, a continuación, simplemente haga clic en este flujo de datos recién creado para acceder al panel de secretos de la API del Measurement Protocol.

El siguiente paso es crear una clave, a la que hará referencia en sus llamadas a la API del Measurement Protocol. Todo lo que tiene que hacer es proporcionar un apodo para su clave y puede utilizar el ID proporcionado en sus llamadas a la API. Como puede ver en la siguiente lista, nuestros Data.Monks la utilizan bastante

Una vez configuradas tus claves, toma nota de tu GA4 Measurement ID para tu flujo IoT y utiliza código para crear una URL al servicio de Measurement Protocol que combine todo lo que necesitamos, incluidos los parámetros del evento. En el siguiente ejemplo, nuestro frigorífico conectado enviará un evento cuando la puerta del frigorífico esté abierta.

La URL deseada debería tener este aspecto

https://www.google-analytics.com/mp/collect?measurement_id={su ID}&api_secret={su clave}

Ahora tenemos que enviar la URL anterior como una solicitud POST, con una carga JSON que contenga los parámetros del evento que queremos enviar. Hay que tener en cuenta que, al no tratarse de un evento GA4 enviado desde un navegador o una aplicación móvil, no se produce una detección y recopilación automática de elementos adicionales, como ocurre con la medición mejorada de GA4. De hecho, el Measurement Protocol sólo mide lo que tú le envías. A partir de ahí, envía la solicitud en tu lenguaje de programación favorito: Python, en mi caso.

Efectivamente, el evento se registra en la interfaz en tiempo real de GA4 y las visitas posteriores pasarán a formar parte de tus informes de GA4 y se transmitirán a BigQuery si has vinculado tu propiedad a Google Cloud Platform.

Y, por supuesto, como seguro que ya puedes adivinar, crear cuadros de mando sobre la actividad de tus dispositivos es pan comido en Google Looker Studio. Y eso es todo

Es hora de que pruebes tú mismo la herramienta GA4.

Hemos visto que el Measurement Protocol, al igual que otras plataformas de recopilación de datos a nivel de eventos, utiliza un formato compatible con API para enviar los datos a Google Analytics. Desde un punto de vista técnico, se trata de una implementación muy sencilla y eficaz, así que no dudes en ser creativo para todos tus proyectos de IoT.

Hemos hablado de utilizar el Measurement Protocol principalmente para dispositivos IoT (o cualquier dispositivo que no sea un ordenador, un teléfono móvil o una consola de videojuegos). Teniendo esto en cuenta, también puedes utilizarlo como método de intercambio de datos en un entorno en la nube como una devolución de llamada de la API después de que se complete un proceso. Esto significa que el Measurement Protocol funciona muy bien con Cloud Functions o colas de mensajería como Google Pub/Sub o Kafka.

Por último, volviendo a la observación que hice sobre la IA, este tipo de medición es, en efecto, una forma ideal de recopilar combustible para un modelo de IA/ML, pero la IA también se puede utilizar para activar el evento adecuado en el momento adecuado y con la carga de datos adecuada. En este punto, la IA puede improvisar y mejorar el plan de recopilación de datos previsto, comenzar a enviar eventos fuera del alcance de su programa original y desbloquear aún más información. En combinación con Cloud ML de Google Cloud Platform, los resultados pueden sorprenderle

En resumen, estos son los puntos clave del Measurement Protocol:

• Mecanismo sencillo: cualquier sistema que pueda generar una URL puede utilizarlo
• Fomenta una recopilación de datos concisa, compacta y respetuosa con la privacidad
• Se puede utilizar con cualquier cosa y sobre cualquier cosa
• Aprovecha la potencia del modelo de datos planos de Google Analytics 4
• Pequeña huella de software: consumo de recursos muy limitado
• Complementa una estrategia de IA y abre nuevas oportunidades