Mediciones más precisas
ÚLTIMA ACTUALIZACIÓN 19 ENE. 2022
Asimismo, seguimos revisando nuestras políticas y procesos, y las metodologías en las que se basan. Si se producen cambios en ellos, se modifican también los cálculos de las métricas. Estos cambios en la metodología o los procesos pueden sumarse a tendencias que indican que mitigamos cada vez mejor o peor las infracciones.
Calidad, actualizaciones y correcciones de la información
A medida que mejoran nuestros procesos de medición, revisamos y validamos periódicamente nuestras métricas. También establecimos un conjunto de normas que rigen cómo identificamos, corregimos e informamos públicamente cualquier ajuste a los datos publicados con anterioridad.
Identificamos problemas potenciales con nuestros datos mediante una variedad de controles de calidad regulares en nuestros conjuntos de datos, herramientas de medición y sistemas de registro. Cuando se identifica un problema potencial, los equipos relevantes de Meta se someten a una serie de pasos para investigar, mitigar e identificar soluciones a largo plazo del problema.
Después de abordar el problema, Meta actualizará los datos en el Informe de cumplimiento de las Normas comunitarias. Cuando tales correcciones sean significativas, Meta describirá el problema, las métricas afectadas y los períodos pertinentes.
Correcciones y ajustes
Por qué desarrollamos procesos de calidad de la información
Nos comprometemos a compartir de manera transparente nuestras métricas, así como los procesos que utilizamos para calcularlas y mejorarlas. Para simplificar y regular mejor la publicación de ajustes y correcciones de nuestras metodologías y métricas, desarrollamos un procedimiento de calidad de la información para identificar, rectificar e informar públicamente cualquier ajuste que hagamos a la información publicada con anterioridad. Esta es una práctica común en los informes públicos de grandes agencias de estadística y agencias federales, y se desarrolló de acuerdo con las prácticas recomendadas de creación de informes de datos tanto en sectores públicos como privados. Estas revisiones y procedimientos que desarrollamos serán fundamentales para mantener la precisión e integridad de nuestra creación de informes en el futuro.
Evaluamos y validamos constantemente nuestras métricas y nos aseguramos de que la información que compartimos sea precisa y que nuestras metodologías para generar estos datos sean sólidas. Como parte de este trabajo, cuando actualicemos nuestras metodologías o ajustemos métricas, compartiremos esos cambios aquí.
Cómo evaluamos y mejoramos nuestras métricas
Mejoramos constantemente nuestros procesos y metodologías para proporcionar las cifras más significativas y precisas sobre cómo aplicamos nuestras políticas. Durante el verano de 2019, implementamos procesos de calidad de la información que crean más controles y contrapesos para asegurarnos de compartir métricas válidas y coherentes.
Cómo identificamos los escenarios prioritarios para confirmar la validez
Identificamos las diferentes dimensiones de cada métrica y desarrollamos una priorización de riesgos de los segmentos que pueden afectar significativamente las métricas. Para los segmentos en esta lista prioritaria, implementamos múltiples controles para asegurarnos de que estos segmentos capturen la información con precisión.
Por ejemplo, dividimos nuestras métricas de contenido sobre el que se tomaron medidas en múltiples dimensiones para la revisión. Por ejemplo, dividimos el contenido en función de si la medida se tomó mediante nuestros sistemas automatizados o revisión manual, qué nos llevó a tomar medidas y sobre qué tipo de contenido (fotos, texto, video) tomamos medidas.
Con estas diferentes dimensiones, evaluamos posteriormente qué nivel de sesgo se introduciría en nuestra medición si no se representara correctamente en la métrica (por ejemplo, si no incluyéramos contenido de video en nuestras métricas). Estas evaluaciones nos permiten identificar qué dimensiones podrían afectar la métrica (como si las medidas se tomaron mediante la revisión manual).
Luego, analizamos cuánto podría verse afectada la métrica si esa dimensión fuera incorrecta (supongamos que no registramos el contenido sobre el que se tomaron medidas a través de la revisión manual). A continuación, priorizamos los escenarios de mayor riesgo para realizar otras verificaciones cruzadas. Para estas combinaciones de alto riesgo, desarrollamos sistemas adicionales de seguimiento y verificación cruzada para garantizar que estas métricas se calculen correctamente.
Controles de validez y coherencia
También implementamos controles de coherencia para sumar una validación adicional a nuestras métricas. Estos incluyen:
Controles de coherencia
Evaluamos periódicamente nuestras medidas con un sistema diferente e independiente que determina las medidas tomadas con respecto a los contenidos. De forma regular, controlamos las diversas métricas independientes que están destinadas a identificar grandes errores de contabilización.
Auditoría y depuración de nuestras herramientas de medición
Realizamos diversos controles aleatorios para verificar la precisión de nuestros sistemas de medición casi en tiempo real. Esto incluye controlar varios resultados que se presentan posteriormente en nuestro sistema para volver a verificar los resultados previos. Por ejemplo, confirmamos que el contenido que se apela también se registró como contenido sobre el que se tomaron medidas, ya que es un requisito para la apelación. Muchos de estos controles están destinados a identificar errores importantes, como el contenido que se apeló, pero que nunca se eliminó.
Al igual que con todos los aspectos de la creación de informes sobre el cumplimiento de normas, seguiremos desarrollando y mejorando nuestros procesos de revisión de validez y coherencia a lo largo del tiempo.
Procedimientos internos de revisión y corrección
También establecimos procedimientos para identificar y corregir información previamente compartida en nuestro informe de cumplimiento de normas, que revisaremos y actualizaremos con regularidad. Cuando identificamos problemas potenciales en las métricas compartidas a través del Informe de cumplimiento de las Normas comunitarias, seguimos estos pasos:
- Informes: Si se descubre un problema potencial, nuestros equipos presentan inmediatamente un informe de incidente que alerta a los equipos relevantes para que comiencen a investigar el problema.
- Investigación y mitigación: Los equipos relevantes revisan el problema potencial, realizan cambios inmediatos para evitar otros problemas de coherencia si es necesario y desarrollan soluciones para evitar el problema en el futuro.
- Dimensionar el problema: Los equipos relevantes revisan el problema potencial, realizan cambios inmediatos para evitar otros problemas de coherencia si es necesario y desarrollan soluciones para evitar el problema en el futuro.
- Revisión posterior del incidente: Una vez mitigado el problema, llevamos a cabo una revisión interna detallada para identificar las causas raíz y el impacto total del problema. Esto nos permite identificar riesgos más amplios para la validez de nuestra medición con el fin de prevenirlos o minimizarlos.
Informe de ajustes
Después de identificar el problema y de ajustar la métrica afectada, informaremos públicamente la corrección al actualizar esta publicación cuando se presente el Informe de cumplimiento de las Normas comunitarias. En dicha actualización, describiremos el problema, las métricas afectadas y los períodos pertinentes. Los datos de los trimestres previamente afectados en el Informe de cumplimiento de las Normas de contenido incluirán cualquier métrica ajustada cuando sea posible para garantizar que las comparaciones a lo largo del tiempo sean significativas.
Búsqueda de aportes y expansión de las métricas que informamos
Además del trabajo que realizamos internamente para evaluar y mejorar nuestras métricas, también buscamos aportes externos sobre nuestras metodologías y expandimos las métricas informadas para brindar un panorama más sólido de nuestro desempeño al aplicar las políticas.
Evaluación y aportes sobre la metodología
Para garantizar que nuestros métodos sean transparentes y se basen en principios sólidos, buscamos obtener análisis y aportes de expertos en ciertas áreas a fin de determinar si las métricas que proporcionamos son informativas.
Con el objetivo de asegurarnos de que nuestro enfoque para medir el cumplimiento sobre el contenido fuera significativo y preciso, trabajamos con Data Transparency Advisory Group (DTAG), un grupo externo de expertos académicos internacionales en áreas de medición, estadística, criminología y gobernanza. En mayo de 2019, evaluaron de manera pública e independiente si las métricas que compartimos en el Informe de cumplimiento de las Normas comunitarias brindan medidas precisas y significativas sobre cómo aplicamos nuestras políticas, así como los desafíos que enfrentamos en este trabajo y lo que hacemos para abordarlos. En términos generales, determinaron que nuestras métricas eran maneras razonables de medir las infracciones y que se alineaban con las prácticas recomendadas. También proporcionaron una serie de recomendaciones sobre cómo podemos seguir siendo más transparentes con respecto a nuestro trabajo, lo que analizamos en detalle y seguiremos explorando. Además, Meta se comprometió a realizar una auditoría independiente de las métricas compartidas en este informe en 2021.
Lee el Informe de cumplimiento de las Normas comunitarias más reciente