Mediciones más precisas
ÚLTIMA ACTUALIZACIÓN 19 ENE. 2022
Asimismo, seguimos revisando nuestras políticas y procesos, y las metodologías en las que se basan. Si se producen cambios en ellos, se modifican también los cálculos de las métricas. Estos cambios en la metodología o los procesos pueden sumarse a tendencias que indican que cada vez paliamos mejor o peor las infracciones.
Calidad, actualizaciones y correcciones de la información
A medida que nuestros procesos de medición van mejorando, revisamos y validamos nuestras métricas periódicamente. También hemos establecido un conjunto de normas que rigen cómo identificamos, corregimos e informamos públicamente de cualquier ajuste en los datos publicados con anterioridad.
Identificamos problemas potenciales con nuestros datos mediante una serie de controles de calidad habituales de nuestros conjuntos de datos, herramientas de medición y sistemas de registro. Cuando identificamos un problema potencial, los equipos de Meta correspondientes siguen una serie de pasos con el objetivo de investigarlo y paliarlo, así como para identificar soluciones a largo plazo.
Después de abordar el problema, Meta actualiza los datos en el Informe de aplicación de las Normas comunitarias. Cuando tales correcciones son significativas, Meta describe el problema, las métricas afectadas y los periodos de tiempo correspondientes.
Correcciones y ajustes
Por qué desarrollamos procesos de calidad de la información
Nos comprometemos a compartir nuestras métricas con transparencia, así como los procesos que aplicamos para calcularlas y mejorarlas. Para simplificar y regular mejor la publicación de ajustes y correcciones de nuestras metodologías y métricas, hemos desarrollado un procedimiento de calidad de la información para identificar y rectificar cualquier ajuste que hagamos a la información publicada con anterioridad e informar públicamente de ello. Esta es una práctica común en los informes públicos de grandes agencias federales y de estadística, y se ha desarrollado de acuerdo con las prácticas recomendadas de creación de informes de datos tanto en sectores públicos como privados. Las revisiones y los procedimientos que desarrollamos serán fundamentales para mantener la precisión e integridad de nuestra creación de informes en el futuro.
Evaluamos y validamos constantemente nuestras métricas y nos aseguramos de que la información que compartimos sea precisa y que nuestras metodologías sean sólidas para generar estos datos. Como parte de esta labor, cuando actualicemos nuestras metodologías o ajustemos métricas, compartiremos dichos cambios aquí.
Cómo evaluamos y mejoramos nuestras métricas
Mejoramos constantemente nuestros procesos y metodologías para proporcionar las cifras más significativas y precisas sobre cómo aplicamos nuestras políticas. En el verano de 2019 implementamos procesos de calidad de la información que dan lugar a más controles y contrapesos para asegurarnos de que compartimos métricas válidas y coherentes.
Cómo identificamos las situaciones prioritarias para confirmar la validez
Identificamos las diferentes dimensiones de cada métrica y definimos una priorización de riesgos de los segmentos que pueden afectar significativamente a las métricas. Para los segmentos de esta lista prioritaria, implementamos múltiples controles para asegurarnos de que capturen la información con precisión.
Por ejemplo, dividimos nuestras métricas de contenido sobre el que se han tomado medidas en diferentes aspectos para la revisión. Por ejemplo, dividimos el contenido en función de si la medida la han tomado nuestros sistemas automatizados o el equipo de revisión manual, qué nos ha llevado a tomar medidas y sobre qué tipo de contenido (fotos, texto, vídeo) las tomamos.
Teniendo en cuenta estas diferentes áreas, posteriormente evaluamos qué nivel de sesgo se introduciría en nuestra medición si estas no se representaran correctamente en la métrica (por ejemplo, si no incluyéramos contenido de vídeo en ellas). Estas evaluaciones nos permiten identificar qué aspectos podrían afectar a la métrica (como si las medidas las tomara el equipo de revisión manual).
Después analizamos en qué medida podría verse afectada la métrica si esos aspectos fueran incorrectos (supongamos que no registramos el contenido sobre el que se han tomado medidas mediante revisión manual). A continuación, priorizamos las situaciones que plantean un mayor riesgo para realizar otras verificaciones cruzadas. En el caso de las combinaciones de alto riesgo, desarrollamos sistemas adicionales de seguimiento y verificación cruzada para garantizar que estas métricas se calculen correctamente.
Controles de validez y coherencia
También implementamos controles de coherencia para aportar una validación adicional a nuestras métricas, entre los que se incluyen los siguientes:
Controles de coherencia
Periódicamente evaluamos nuestras medidas con un sistema diferente e independiente que determina las medidas tomadas con respecto a los contenidos. Cada poco tiempo controlamos las diversas métricas independientes que están destinadas a identificar grandes errores de recuento.
Auditoría y depuración de nuestras herramientas de medición
Realizamos diversos controles aleatorios para verificar la precisión de nuestros sistemas de medición casi en tiempo real, como controlar varios resultados que se presentan posteriormente en nuestro sistema para volver a verificar los resultados previos. Por ejemplo, confirmamos que el contenido que se apela también se haya registrado como contenido sobre el que se han tomado medidas, ya que es un requisito para la apelación. Muchos de estos controles están destinados a identificar errores importantes, como el contenido que se ha apelado pero que no ha llegado a eliminarse.
Tal como ya hacemos con todos los aspectos de la creación de informes de aplicación de las normas, nuestro compromiso es seguir desarrollando y mejorando nuestros procesos de revisión de validez y coherencia con el paso del tiempo.
Procedimientos internos de revisión y corrección
También hemos establecido procedimientos para identificar y corregir información compartida anteriormente en nuestro informe de aplicación de las normas, que revisaremos y actualizaremos periódicamente. Cuando identificamos problemas potenciales en las métricas compartidas a través del Informe de aplicación de las Normas comunitarias, seguimos estos pasos:
- Informes. Si se detecta un problema potencial, nuestros equipos presentan inmediatamente un informe del incidente que alerta a los equipos correspondientes para que empiecen a investigar el problema.
- Investigación y mitigación. Los equipos en cuestión analizan el problema potencial, realizan cambios inmediatos para evitar otros problemas de coherencia si es necesario y desarrollan soluciones para evitar que el problema vuelva a producirse en el futuro.
- Evaluación del tamaño del problema. Los equipos en cuestión analizan el problema potencial, realizan cambios inmediatos para evitar otros problemas de coherencia si es necesario y desarrollan soluciones para evitar que el problema vuelva a producirse en el futuro.
- Revisión de incidentes una vez solucionado. Una vez solucionado, llevamos a cabo una revisión interna detallada para identificar la raíz del problema y su repercusión general. Esto nos permite identificar riesgos más amplios para la validez de nuestra medición con el fin de prevenirlos o minimizarlos.
Informe de ajustes
Después de identificar el problema y de ajustar la métrica afectada, informamos públicamente de la corrección al actualizar esta publicación cuando se presenta el Informe de aplicación de las Normas comunitarias. En dicha actualización describimos el problema, las métricas afectadas y los periodos de tiempo pertinentes. Los datos de los trimestres afectados anteriormente del informe incluirán cualquier métrica ajustada cuando sea posible para garantizar que las comparaciones a lo largo del tiempo sean significativas.
Búsqueda de opiniones y ampliación de las métricas de las que informamos
Además del trabajo que realizamos internamente para evaluar y mejorar nuestras métricas, también buscamos opiniones externas sobre nuestras metodologías y ampliamos las métricas que incluyen nuestros informes para ofrecer un panorama más sólido de nuestro rendimiento al aplicar las políticas.
Evaluación y opiniones sobre la metodología
Para garantizar que nuestros métodos sean transparentes y se basen en principios sólidos, procuramos obtener análisis y opiniones de expertos en ciertas áreas a fin de determinar si las métricas que proporcionamos son informativas.
Con el objetivo de asegurarnos de que nuestro enfoque para medir el cumplimiento de las normas de contenido fuera significativo y preciso, hemos trabajado con Data Transparency Advisory Group (DTAG), un grupo externo de expertos académicos internacionales en ámbitos como la medición, la estadística, la criminología y la gobernanza. En mayo de 2019 evaluaron de manera pública e independiente si las métricas que compartimos en el Informe de aplicación de las Normas comunitarias brindan medidas precisas y significativas sobre cómo aplicamos nuestras políticas, así como los desafíos a los que nos enfrentamos en esta labor y lo que hacemos para abordarlos. En términos generales, determinaron que nuestras métricas constituían maneras razonables de medir las infracciones y que eran acordes con las prácticas recomendadas. También ofrecieron una serie de recomendaciones sobre cómo podemos seguir siendo más transparentes con respecto a nuestro trabajo, algo que analizamos en detalle y en lo que seguimos trabajando. Además, Meta se ha comprometido a realizar una auditoría independiente de las métricas compartidas en este informe en 2021.
Consulta el Informe de aplicación de las Normas comunitarias más reciente